当催收人员上门到公司单位时，这确实可能给您带来一定的困扰和压力。以下是一些建议，帮助您应对这种情况：

首先，保持冷静和礼貌是非常重要的。与催收人员进行良好的沟通是解决问题的关键。您可以向他们说明自己的情况，比如目前的财务状况、还款的困难以及正在采取的措施等。同时，也要明确表达您对于催收行为影响到工作环境的担忧，并请求他们理解并尊重您的工作隐私。

其次，了解相关的法律法规也是很有必要的。催收债务应当采用合法的方式进行，如果催收人员采用了非法、威胁或骚扰的方式进行催收，您有权拒绝并可以向相关部门进行投诉。例如，您可以向当地的消费者保护协会、金融监管机构或者公安机关报案，以维护自己的合法权益。

另外，如果您确实存在债务问题，那么积极与债权人协商也是解决问题的有效途径。您可以与债权人商讨制定一个合理的还款计划，以减轻自己的还款压力，并避免催收行为对工作和生活造成更大的影响。

最后，为了避免类似的情况再次发生，您可以考虑采取一些预防措施。比如，与债权人明确约定催收的方式和频率，避免催收电话频繁打扰到您的工作；或者在工作单位前台或相关部门留下您的联系方式，以便在有必要时能够及时与您取得联系，而避免直接上门催收。

总之，面对催收人员上门到公司单位的情况，保持冷静、了解法律法规、积极与债权人协商以及采取预防措施都是非常重要的。希望这些建议能够帮助您妥善应对这一问题。