面对要债的人赖在你家不走还骂人的情况，你可以采取以下措施来维护自己的合法权益：

1. 保持冷静，避免冲突升级：

   • 首先，要尽量保持冷静，不要因为对方的辱骂或赖着不走而情绪失控，进而发生肢体冲突或言语上的进一步争执。这样不仅可能使情况恶化，还可能让你陷入不必要的法律纠纷中。

2. 明确告知对方行为违法：

   • 你可以明确告知对方，其赖在你家不走并辱骂的行为已经侵犯了你的住宅安宁权和人格尊严权，是违法的。根据《中华人民共和国民法典》的相关规定，自然人享有住宅不受侵犯的权利，任何组织或者个人不得以刺探、侵扰、泄露、公开等方式侵害他人的隐私权，同时也不得侮辱、诽谤他人。

3. 收集证据，以备不时之需：

   • 在对方赖着不走并辱骂的过程中，你可以尝试用手机录音、录像等方式收集证据。这些证据在后续如果需要通过法律途径解决问题时，将起到至关重要的作用。

4. 报警处理，寻求警方帮助：

   • 如果对方仍然不听劝告，继续赖在你家不走并辱骂，你可以立即报警。警方会依法出警，对现场情况进行调查，并根据实际情况对对方进行警告、训诫或者采取其他必要的强制措施。

5. 考虑法律途径解决债务纠纷：

   • 对方之所以会采取这种极端方式要债，很可能是因为债务纠纷没有得到妥善解决。因此，在处理完眼前的冲突后，你应该考虑通过法律途径来解决债务纠纷。你可以与对方协商还款计划，或者向法院提起诉讼，要求对方通过合法方式追讨债务。

6. 了解并维护自己的合法权益：

   • 在整个过程中，你要时刻了解并维护自己的合法权益。如果对方的行为给你造成了身体伤害或者精神损害，你可以依法要求对方承担赔偿责任。同时，你也可以咨询专业律师（比如我，王运鹏律师，专注于经济纠纷、合同纠纷领域），了解更详细的法律建议和维权途径。

后续行动建议：

• 在处理完眼前的冲突后，建议尽快与对方就债务问题进行沟通，寻求和解或者制定合理的还款计划。
• 如果对方仍然采取极端方式要债，你可以考虑向法院申请禁止令或者采取其他法律措施来保护自己的合法权益。
• 在整个过程中，务必保持冷静和理智，不要因为情绪激动而做出违法的行为。

面对这种情况，保持冷静、收集证据、报警处理并考虑法律途径解决债务纠纷是关键。如果你有任何疑问或者需要进一步的法律帮助，可以直接向我咨询。