针对前夫家人到单位影响您工作的问题，您可以采取以下法律措施来维护自己的合法权益：

1. 明确法律权利与义务：

   • 根据《中华人民共和国民法典》的相关规定，公民享有名誉权、隐私权以及工作不受干扰的权利。前夫家人到单位影响您工作，可能侵犯了您的这些权利。
   • 同时，根据《中华人民共和国治安管理处罚法》，干扰他人正常工作、生活的行为，可能面临警告、罚款等行政处罚。

2. 收集证据：

   • 记录干扰行为：详细记录前夫家人到单位的时间、地点、具体行为（如言语侮辱、肢体冲突等）以及对您工作造成的影响。
   • 收集证人证言：如果同事或领导目睹了干扰行为，可以请他们出具书面证言或作为证人出庭。
   • 保存相关证据：如录音、录像、短信、邮件等，这些都可以作为证明干扰行为存在的有力证据。

3. 与单位沟通：

   • 向单位反映情况：及时向单位的人力资源部门或上级领导反映前夫家人干扰您工作的情况，请求单位协助解决。
   • 要求单位采取措施：根据单位的相关规定，要求单位对干扰行为进行制止，并采取措施保护您的工作环境不受干扰。

4. 报警处理：

   • 向公安机关报案：如果前夫家人的干扰行为严重影响了您的工作和生活，您可以向当地公安机关报案，请求公安机关依法处理。
   • 配合公安机关调查：在报案后，积极配合公安机关的调查工作，提供相关证据和线索。

5. 寻求法律救济：

   • 提起民事诉讼：如果前夫家人的干扰行为给您造成了经济损失或精神损害，您可以向法院提起民事诉讼，要求对方承担民事责任。
   • 申请行为保全：在诉讼过程中，如果担心前夫家人会继续干扰您的工作，您可以向法院申请行为保全，要求法院禁止对方实施干扰行为。

6. 注意事项：

   • 保持冷静与理智：在面对前夫家人的干扰时，保持冷静与理智，避免与对方发生直接冲突。
   • 及时咨询专业律师：如果您对如何处理此类问题感到困惑或不确定，可以及时咨询专业律师，获取更具体的法律建议和指导。

针对您的情况，我建议您首先尝试与单位沟通并收集证据。如果问题无法得到妥善解决，再考虑报警处理或寻求法律救济。 在整个过程中，请务必保持冷静与理智，依法维护自己的合法权益。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。