要避免在工作中出现违反回避制度的情况，关键在于明确回避制度的适用范围、遵循回避程序，并加强自我监督与培训。以下从几个方面详细阐述：

一、明确回避制度的适用范围

回避制度主要适用于那些可能因个人利益、亲属关系或其他特定关系而影响公正执行职务的情形。在劳动工伤领域，虽然直接涉及回避制度的情况可能不如刑事诉讼或民事诉讼那么常见，但同样存在需要回避的情形，比如：

1. 利益冲突：如果处理工伤案件的工作人员与案件当事人存在直接或间接的利益关系，如亲属关系、经济往来等，可能影响公正处理的，应当回避。
2. 特定关系：如工作人员与案件当事人是近亲属关系，或者存在其他可能影响公正处理的关系，如师生关系、上下级关系等，在特定情况下也可能需要回避。

二、遵循回避程序

1. 主动申请回避：工作人员在发现自己存在需要回避的情形时，应当主动向所在单位或上级部门提出回避申请，说明回避的理由和事实依据。
2. 单位决定回避：单位在收到回避申请后，应当及时进行审查，并根据实际情况作出是否回避的决定。如果决定回避，应当安排其他合适的人员接替处理案件。
3. 当事人申请回避：如果当事人认为处理案件的工作人员存在需要回避的情形，也有权向单位提出回避申请。单位在收到申请后，同样需要进行审查并作出决定。

三、加强自我监督与培训

1. 增强法律意识：工作人员应当加强对回避制度相关法律法规的学习，明确回避制度的法律意义和重要性，增强自觉遵守回避制度的意识。
2. 建立监督机制：单位应当建立健全回避制度的监督机制，对工作人员是否遵守回避制度进行定期检查和评估，确保回避制度得到有效执行。
3. 加强培训与教育：单位应当定期组织工作人员进行回避制度方面的培训和教育活动，提高工作人员对回避制度的认识和理解水平，增强遵守回避制度的自觉性。

四、具体实践中的注意事项

1. 详细记录与报告：在处理工伤案件时，工作人员应当详细记录与案件相关的所有信息和情况，包括与当事人的接触、交流等。如果发现自己存在需要回避的情形，应当及时向上级报告并申请回避。
2. 保持客观公正：即使不存在需要回避的情形，工作人员在处理工伤案件时也应当保持客观公正的态度，不受任何外部因素的影响和干扰，确保案件得到公正、合理的处理。

在工作中避免违反回避制度，需要工作人员明确回避制度的适用范围、遵循回避程序、加强自我监督与培训，并在具体实践中注意详细记录与报告、保持客观公正等事项。如果你在工作中遇到任何与回避制度相关的问题或疑虑，可以直接向我咨询，我会为你提供专业的法律意见和帮助。