不能因为对方辱骂你而免除你的还款义务。欠别人钱和对方辱骂你是两个独立的法律关系，不能相互抵消或作为不还款的理由。
债务关系：
- 你欠别人钱，这是一个明确的债务关系。根据法律，你有义务偿还这笔债务。无论对方是否辱骂你，这都不会改变你需还款的事实。
- 如果无法按时还款，应与债权人协商，寻求延期还款、分期还款等解决方案。若协商无果，债权人可能通过法律途径追讨债务。
对方辱骂你的行为：
- 对方辱骂你，这是对你名誉权的侵害。你有权要求对方停止辱骂、消除影响、赔礼道歉，并可以要求赔偿因此造成的经济损失或精神损害。
- 如果辱骂行为严重，甚至可能构成侮辱罪或诽谤罪，你可以向公安机关报案，由公安机关依法处理。
综上所述，你不能因为对方辱骂你就拒绝还款。你应妥善处理债务问题，同时维护自身的名誉权。如果遇到困难或需要法律帮助，可以直接向我咨询。