结论：催收人员到单位进行催收，其合法性取决于催收行为的具体方式。若催收行为合法、文明，且未干扰单位秩序或侵犯个人权益，则属于合法催收；反之，若存在扰乱秩序、暴力威胁、侵犯隐私等行为，则构成违法催收。
详细分析：
合法催收情形：
- 催收方式：催收人员在合理的时间到单位，以和平、文明的方式与债务人沟通，告知债务情况，并提醒其履行还款义务。例如，催收人员可以在工作日的正常工作时间内，礼貌地与债务人面谈，出示相关的委托催账文件和债权证明，就还款问题进行合理的沟通和协商。
- 行为界限：在此过程中，催收人员不得干扰单位的正常工作秩序，也不得对债务人或其同事进行威胁、侮辱、诽谤等不当行为。例如，催收人员不得在单位大吵大闹、拉横幅、堵门等，影响单位正常办公。
- 法律依据：此种催收方式符合正常的追讨债务流程，是债权人或其委托的催收机构主张债权的一种常见且合法的方式。只要催收行为在法律允许的范围内进行，不侵犯债务人的合法权益，就是合法的。
违法催收情形：
- 扰乱单位秩序：
- 行为表现：催收人员在单位大吵大闹、拉横幅、堵门等，影响单位正常办公。例如，催收人员可能通过大声喧哗、张贴告示等方式，试图迫使债务人还款，但这些行为严重干扰了单位的正常工作秩序。
- 法律责任：根据《中华人民共和国治安管理处罚法》第二十三条，此类行为可处警告或罚款，情节较重者可处拘留并罚款。
- 暴力或软暴力威胁：
- 行为表现：对债务人或单位其他人员使用暴力、限制人身自由，或采用长期跟踪、骚扰等软暴力手段。例如，催收人员可能对债务人进行言语威胁、恐吓，甚至动手殴打，或者通过频繁上门骚扰、电话轰炸等方式，给债务人造成精神压力和心理伤害。
- 法律责任：根据《中华人民共和国刑法》相关规定，此类行为可能构成故意伤害罪、非法拘禁罪、寻衅滋事罪等罪名。特别是如果催收行为涉及高利放贷等非法债务，还可能触犯催收非法债务罪。
- 侵犯个人隐私：
- 行为表现：在单位随意宣扬债务人的债务信息、个人隐私等。例如，催收人员可能未经债务人同意，就将其欠款情况、家庭住址、联系方式等个人信息泄露给单位同事或其他人，给债务人造成不必要的困扰和损失。
- 法律责任：根据《中华人民共和国民法典》第一千零三十二条、第一千零三十三条，此类行为侵犯了债务人的隐私权，需承担相应的法律责任。债务人可以要求催收人员停止侵害、赔礼道歉，并可以要求赔偿损失。
应对措施：
面对催收人员到单位进行催收，债务人应保持冷静，明确自己的权益和底线。如遇违法催收行为，可采取以下措施维护自身权益：
- 及时向单位反映：寻求单位的支持和保护，让单位协助处理催收事宜。单位可以出面与催收人员沟通，要求其停止不当行为，并维护单位的正常工作秩序。
- 收集证据：保留录音、录像、聊天记录等相关证据，为后续维权提供依据。这些证据可以证明催收人员的违法行为，有助于债务人在维权过程中占据有利地位。
- 报警处理：如催收行为构成违法犯罪，应立即向公安机关报案。公安机关会依法对催收人员进行调查处理，维护债务人的合法权益。
- 投诉举报：可向金融监管部门、行业协会等相关机构投诉催收机构的不当行为，要求其受到监管和处罚。这些机构会对催收机构进行调查处理，并可能对其采取相应的监管措施或处罚。
综上所述，催收人员到单位进行催收时，必须遵守法律法规，尊重债务人的合法权益。债务人也应了解自己的法律地位和保护措施，以便在必要时采取适当的行动来维护自己的权益。如果你在这方面有任何疑问或需要进一步的法律帮助，请随时向我咨询。