核心结论：面对贷款中介因居间协议违约来单位骚扰的情况，你可以通过明确拒绝沟通、收集证据、向单位说明情况、报警以及通过法律途径解决等方式来应对。以下是具体分析：

1. 明确拒绝沟通并表明立场：

   • 当贷款中介来到单位骚扰时，你应首先明确且坚定地拒绝与其进行任何形式的沟通，尤其是涉及居间协议违约等私人事务的讨论。
   • 你可以礼貌但坚决地告知对方，你正在工作，不希望被打扰，并要求对方立即离开单位。

2. 收集并保存证据：

   • 在对方骚扰的过程中，尽量保持冷静，并尝试收集相关证据，如录音、录像、目击者证言等。
   • 这些证据在后续可能的法律纠纷中将成为证明对方骚扰行为的重要依据。

3. 向单位说明情况并寻求帮助：

   • 及时向你的上级或单位的人力资源部门报告此事，说明贷款中介的骚扰行为以及你对此的拒绝态度。
   • 单位有责任保护员工免受不必要的骚扰，他们可能会采取措施，如禁止对方进入单位、提供安全保护等。

4. 报警处理：

   • 如果贷款中介的骚扰行为持续不断，甚至升级为威胁、恐吓等更严重的行为，你应立即报警。
   • 警方将介入调查，并根据情况对骚扰者采取相应的法律措施。

5. 通过法律途径解决居间协议违约问题：

   • 针对居间协议违约问题，你可以考虑通过法律途径来解决。这包括但不限于向法院提起诉讼，要求对方承担违约责任。
   • 在此过程中，你可以咨询专业律师（即我，你可以直接向我咨询相关法律问题），以获取更具体的法律建议和帮助。律师将根据你的具体情况，为你制定合适的诉讼策略，并代表你进行法律诉讼。

在处理此类问题时，请务必保持冷静和理智，不要因情绪激动而做出过激行为。同时，也要积极维护自己的合法权益，不要因对方的骚扰而妥协或放弃自己的权利。如果你有任何进一步的法律问题或需要更具体的法律建议，请随时向我咨询。