结论：别人不可以因你差其钱而到你家里闹。这种行为可能构成侵权，甚至可能触犯刑法，你可以采取相应的法律措施来维护自己的合法权益。
分析说明：
人格权保护：
- 根据《中华人民共和国民法典》的相关规定，公民享有名誉权、隐私权等人格权，这些权利受法律保护，任何组织或者个人不得以侮辱、诽谤等方式侵害他人的名誉权，也不得非法侵入、搜查他人住宅等侵犯他人隐私权。
- 别人到你家里闹，可能涉及侮辱、诽谤等侵犯名誉权的行为，也可能涉及非法侵入住宅等侵犯隐私权的行为，这些行为都是违法的。
可能的法律后果：
- 如果别人的行为构成侵权，你可以依法要求其承担侵权责任，包括停止侵害、赔礼道歉、赔偿损失等。
- 如果别人的行为情节严重，甚至可能触犯刑法，如构成非法侵入住宅罪、侮辱罪等，那么将面临刑事处罚。
应对措施：
- 保留证据：首先，你应该保留好别人到你家里闹的相关证据，如现场照片、视频、录音等，以及可能的证人证言。
- 报警处理：如果别人的行为已经构成违法或犯罪，你应该立即向公安机关报案，由公安机关依法处理。
- 提起诉讼：如果别人的行为给你造成了损失，你可以依法向人民法院提起诉讼，要求其承担侵权责任或刑事责任。
特殊场景：
- 如果别人只是到你家里进行正常的催讨债务行为，没有采取侮辱、诽谤或非法侵入等违法手段，那么这种行为虽然可能让你感到不适，但并不构成侵权或犯罪。然而，即使如此，你也有权要求其离开你的住宅，并可以通过协商、调解或诉讼等方式来解决债务问题。
后续行动建议：
- 如果你面临别人到你家里闹的情况，首先保持冷静，不要与对方发生冲突。
- 立即采取措施保留证据，并尽快报警或寻求法律援助。
- 在处理债务问题时，建议通过合法途径进行，如协商、调解或诉讼等，以避免不必要的纠纷和损失。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。