面对放高利贷者到单位骚扰的情况，你首先应当明确的是，这种行为是违法的，你有权采取措施保护自己。以下是从不同角度为你提供的分析和建议：
法律背景与依据：
- 根据《中华人民共和国治安管理处罚法》的相关规定，多次发送淫秽、侮辱、恐吓或者其他信息，干扰他人正常生活的，或者公然侮辱他人或者捏造事实诽谤他人的，处五日以下拘留或者五百元以下罚款；情节较重的，处五日以上十日以下拘留，可以并处五百元以下罚款。放高利贷者到单位骚扰你，很可能构成对上述条款的违反。
- 如果骚扰行为涉及威胁、恐吓等更严重的情节，还可能触犯《中华人民共和国刑法》中关于寻衅滋事罪、敲诈勒索罪等的相关规定。
应对措施：
- 保留证据：首先，要尽可能保留所有与骚扰行为相关的证据，包括但不限于短信、电话录音、视频监控、目击者证言等。这些证据将在后续的法律程序中起到关键作用。
- 报警处理：立即向当地公安机关报案，详细陈述骚扰行为的情况，并提供所保留的证据。公安机关将依法进行调查处理，并根据情况对骚扰者采取相应的法律措施。
- 单位协助：向所在单位的相关部门（如人力资源部、安全保卫部等）报告此事，请求单位提供必要的协助和支持。单位可以采取措施保护你的工作环境安全，如加强安保、限制骚扰者进入单位等。
- 法律途径：如果骚扰行为持续不断且情节严重，你可以考虑通过法律途径维护自己的合法权益。这包括向法院提起民事诉讼，要求骚扰者停止侵害、赔礼道歉、赔偿损失等；或者向相关部门（如银保监会、地方金融监管局等）举报放高利贷者的违法行为。
注意事项：
- 保持冷静：在面对骚扰时，保持冷静和理智至关重要。不要与骚扰者发生直接冲突或激化矛盾，以免给自己带来不必要的伤害。
- 及时沟通：与家人、朋友或同事保持沟通，让他们了解你的情况并寻求他们的支持和帮助。他们的陪伴和鼓励将是你度过难关的重要力量。
- 关注心理健康：长期受到骚扰可能会对你的心理健康造成负面影响。因此，建议你关注自己的心理状态，必要时寻求专业心理咨询师的帮助。
最后，我想强调的是，面对放高利贷者的骚扰行为，你并不孤单。你有法律作为后盾，有单位和社会作为支持。请勇敢地站出来维护自己的合法权益，不要让骚扰者得逞。如果你有任何疑问或需要进一步的帮助，请随时向我咨询。