结论：你没有法律义务归还这些钱，且对方的行为可能构成违法，你可以采取法律手段保护自己。以下是对此问题的详细分析：
关于还款义务：
- 法律关系分析：在民间借贷关系中，通常需要有明确的借款合意和实际的借款交付行为。你提到“没借钱没转账”，这表明你们之间并没有形成法律上的借贷关系。因此，从法律上讲，你没有义务归还这些钱。
- 特殊情况考虑：如果对方能提供证据证明这些钱是赠与、共同消费或其他法律关系下的支出，那么情况可能会有所不同。但根据你的描述，这些钱似乎是在恋爱期间用于共同生活或消费，且没有明确的赠与或借贷协议，因此，你无需承担还款责任。
关于对方骚扰、威胁和恐吓的行为：
- 法律定性：对方的行为可能构成对《治安管理处罚法》的违反，甚至可能触犯《刑法》中的相关规定，如寻衅滋事罪、敲诈勒索罪等。这些行为严重侵犯了你的合法权益，你有权向公安机关报案，要求对方停止侵害并承担相应的法律责任。
- 应对措施：
- 保留证据：首先，你需要保留所有与对方骚扰、威胁和恐吓相关的证据，如聊天记录、短信、电话录音等。这些证据将在你后续维权过程中发挥重要作用。
- 报警处理：其次，你可以向当地公安机关报案，详细陈述对方的行为和你的遭遇。公安机关将依法进行调查处理，并可能对对方采取相应的强制措施。
- 寻求法律援助：如果对方的行为持续不断且对你的生活造成了严重影响，你还可以考虑寻求法律援助或聘请律师提起诉讼，要求对方承担民事赔偿责任或刑事责任。
关于后续建议：
- 保持冷静：在面对对方的骚扰、威胁和恐吓时，保持冷静和理智至关重要。不要与对方发生直接冲突或激化矛盾，以免给自己带来不必要的麻烦和损失。
- 加强自我保护：你可以考虑更换联系方式、居住地址等个人信息，以减少对方找到你的机会。同时，也可以向身边的朋友、家人或社区寻求帮助和支持。
- 持续关注进展：在报警或寻求法律援助后，你需要持续关注案件的进展情况，并与相关部门保持沟通联系。确保你的权益得到充分保障和维护。
总结与启示：在面对类似情况时，我们首先要明确自己的法律地位和权利义务关系。如果对方的行为构成违法或侵权，我们要勇敢地站出来维护自己的合法权益。同时，也要加强自我保护意识，避免给自己带来不必要的麻烦和损失。如果你有任何进一步的疑问或需要进一步的法律帮助，请随时向我咨询。