当银行人员到单位进行催收时，这确实可能给个人和工作环境带来一定的压力和困扰。以下是一些建议来处理这种情况：

一、初步应对

1. 保持冷静：首先，保持冷静和礼貌的态度是非常重要的。避免与银行人员发生争执或冲突，这有助于维护个人形象和公司声誉。
2. 了解催收原因：与银行人员沟通，明确了解催收的具体原因、欠款金额以及还款期限等信息。这有助于你更好地评估自己的财务状况，并制定相应的还款计划。

二、沟通协商

1. 提出个人困难：如果你确实面临还款困难，可以向银行人员详细说明你的财务状况和还款能力。银行可能会根据你的实际情况，提供灵活的还款方案或延期还款的机会。
2. 请求调整催收方式：你可以向银行人员明确表示，不希望他们频繁地到单位进行催收，因为这可能会对你的工作造成不必要的干扰。你可以请求银行通过其他方式（如电话、邮件等）与你保持联系，并协商一个更合适的催收方式。

三、采取法律措施

1. 保留证据：如果银行人员的催收行为过于频繁或使用了不当手段（如威胁、恐吓等），你应该保留相关证据（如电话记录、短信等），以便在必要时维护自己的权益。
2. 投诉与反馈：你可以向银行的客服部门或相关部门进行投诉，说明情况并要求他们停止不当的催收行为。如果银行未能及时回应或处理你的问题，你还可以考虑向银监会等监管机构进行反馈。
3. 寻求法律援助：如果银行人员的催收行为严重侵犯了你的合法权益（如隐私权、工作安宁权等），你可以考虑寻求法律援助或咨询专业律师，以维护自己的合法权益。

四、与公司沟通

1. 向公司汇报：如果银行人员的催收行为对公司的正常工作造成了干扰，你可以向公司相关部门或领导汇报情况，并请求公司协助处理。公司可能会与银行进行沟通，以寻求一个更合适的解决方案。
2. 请求公司支持：你可以向公司申请一些支持措施，如提供证明文件、协助与银行沟通等。这有助于你更好地应对银行的催收行为，并减轻个人的压力。

总之，面对银行人员的到单位催收行为，你应该保持冷静和礼貌的态度，通过沟通协商寻求合适的解决方案。如果银行人员的行为过于频繁或不当，你可以采取法律措施来维护自己的合法权益。同时，与公司保持沟通并请求支持也是非常重要的。