结论前置：面对催收上门到过去单位的情况，您有权选择拒绝直接交流，但需注意方式方法，并了解可能产生的法律后果。以下是从不同角度的详细分析：

1. 您的权利与选择：

   • 拒绝交流的权利：根据一般法律原则，您有权保护自己的隐私和安宁，不与催收人员直接交流。如果催收人员未经您同意，擅自到您的过去单位进行催收，这可能构成对您隐私权的侵犯。
   • 选择交流的方式：虽然您有权拒绝直接交流，但如果您认为与催收人员沟通有助于解决问题，可以选择通过电话、邮件或其他非面对面的方式与他们联系。这样既能保护您的隐私，又能表达您的意愿和态度。

2. 催收人员的行为规范：

   • 合法催收：催收人员在进行催收时，必须遵守相关法律法规，不得采取暴力、威胁、恐吓等非法手段。如果他们违反了这些规定，您有权向相关部门投诉或报警。
   • 尊重隐私：催收人员应当尊重您的隐私权，不得擅自泄露您的个人信息或向无关第三方透露您的债务情况。如果他们违反了这一原则，您同样有权采取法律措施维护自己的权益。

3. 可能产生的法律后果：

   • 对您的影响：如果您选择拒绝与催收人员直接交流，且催收人员没有采取非法手段进行催收，那么这通常不会对您产生直接的法律后果。然而，如果催收人员因此采取了更激烈的行动，如频繁骚扰、公开您的债务信息等，您可能需要考虑采取法律措施来保护自己。
   • 对催收人员的影响：如果催收人员违反了相关法律法规或行业规范，他们可能会面临法律制裁或行业处罚。例如，他们可能会被罚款、吊销执照或受到其他形式的惩罚。

4. 建议与措施：

   • 保持冷静：面对催收人员的上门催收，保持冷静和理智至关重要。不要因为情绪激动而做出冲动的决定或行为。
   • 了解法律：熟悉相关法律法规和行业规范，了解自己的权利和义务。这样，在面对催收人员时，您就能更加自信地维护自己的权益。
   • 寻求帮助：如果您感到无法应对催收人员的压力或担心自己的权益受到侵害，可以考虑寻求法律帮助或咨询专业律师。他们可以提供专业的建议和指导，帮助您解决问题。

进一步思考：在处理此类问题时，除了考虑法律因素外，还可以考虑与催收人员协商制定还款计划、寻求债务重组或咨询债务咨询机构等解决方案。这些措施可能有助于缓解您的经济压力并避免不必要的法律纠纷。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。