针对您提出的“离职人员补差怎么收回来”的问题，这主要涉及到离职员工社保差额补缴以及可能存在的其他类型补差（如特殊补贴、奖金等）的回收问题。以下我将分两部分进行详细解答：

一、离职员工社保差额补缴的回收问题

根据深圳市人力资源和社会保障局的回复，对于已从用人单位离职的职工，如果职工本人要求补缴社保差额部分，原用人单位必须配合完成补缴。这意味着，社保差额的补缴责任主要在于职工本人和原用人单位的配合，而不是通过直接从离职员工工资中扣款的方式来实现。

在实际操作中，如果离职员工同意补缴社保差额，原用人单位可以与其协商确定补缴方式和时间，并协助其完成补缴手续。如果离职员工拒绝补缴，原用人单位则无法直接强制其补缴，但可以通过法律途径（如起诉）来维护自身权益，不过这通常不是首选方案，因为涉及法律程序，成本较高且耗时较长。

二、其他类型补差的回收问题（如特殊补贴、奖金等）

对于离职员工因未履行合同约定而需返还的特殊补贴、奖金等补差，这主要取决于双方在劳动合同或相关协议中的约定。

1. 如果合同或协议中有明确约定：例如，像您提供的参考信息中提到的，公司给予员工额外住房补贴，并约定在合同期内如员工因个人原因提前离职，需返还该笔补贴。这种情况下，员工离职时，公司有权要求其按约定返还已支付的补贴款。如果员工拒绝返还，公司可以通过法律途径来维护自身权益。

2. 如果合同或协议中没有明确约定：则公司可能难以直接要求离职员工返还补差。在这种情况下，公司可以考虑与离职员工进行协商，寻求双方都能接受的解决方案。如果协商无果，公司可能需要评估是否值得通过法律途径来追讨，这取决于补差的金额大小、公司的法律成本以及追讨的成功率等因素。

总结建议：

• 对于社保差额补缴，原用人单位应配合离职员工完成补缴手续，而不是直接扣款。
• 对于其他类型的补差回收，应首先查看劳动合同或相关协议中的约定，如有明确约定则按约定执行；如无约定，则与离职员工进行协商，寻求妥善解决方案。
• 在处理此类问题时，建议公司保持与离职员工的良好沟通，尽量通过协商方式解决问题，以维护公司形象和员工关系。如果确实需要法律途径解决，也应咨询专业律师的意见，确保自身权益得到妥善维护。