当发现别人在借款时留下了你的电话号码，导致你经常受到骚扰，你可以采取以下措施来维护自己的权益：

结论前置： 你无需为别人的借款行为承担责任，且有权要求停止骚扰。你可以通过明确告知、收集证据、投诉举报以及寻求法律帮助等方式来解决问题。

具体措施：

1. 明确与借款人的关系：

   • 当贷款机构或催收方联系你时，明确告知他们你与借款人并非共同借款人、担保人等具有法律责任的身份，而仅仅是被错误地留作了联系电话。
   • 坚决表明你不应承担任何与该贷款相关的责任，并要求他们停止因该贷款事宜对你的频繁打扰。

2. 尝试联系借款人：

   • 主动联系借款人，了解其为何会留下你的电话，并友好提醒其尽快修改贷款预留的联系方式，以避免对你造成进一步的麻烦。
   • 如果无法联系到借款人或其不愿意更改，你可以向贷款机构提供这一情况，请求他们协助更正联系电话。

3. 要求停止骚扰并收集证据：

   • 如果贷款机构或催收方仍然持续对你进行骚扰，你有权要求他们立即停止。
   • 可以通过书面（如电子邮件、挂号信）或电话方式正式告知，并警告若不改正将采取法律措施。
   • 同时，务必收集所有骚扰行为的证据，如电话录音、短信截图等，以备后续可能需要的法律行动。

4. 投诉举报与寻求法律帮助：

   • 如果对方的行为构成骚扰或侵犯你的权益，你可以向相关监管部门投诉。例如，针对银行类金融机构的不当催收行为，可以向中国银保监会及其派出机构投诉；对于互联网金融业务平台，则可以向互联网金融协会投诉。
   • 若骚扰行为严重，涉及诈骗或其他违法行为，应立即报警。
   • 同时，你也可以咨询律师（比如我），考虑通过民事诉讼等法律途径来维护自己的权益，要求对方停止侵权行为并赔偿损失。

在整个过程中，请保持冷静和理性，确保你的行动既有效又合法。如果你有任何进一步的法律问题或需要更详细的帮助，请随时向我咨询。