核心结论：伤者家属赖在肇事者家中不走的行为不合法，肇事者可通过沟通、报警、调解、诉讼等多种途径解决，以下为具体分析：
伤者家属行为的法律定性
- 伤者家属赖在肇事者家中不走，这种行为侵犯了肇事者的住宅安宁权。根据《中华人民共和国民法典》相关规定，自然人的住宅不受侵犯，禁止非法搜查或者非法侵入公民的住宅。伤者家属若未经允许强行滞留，属于违法行为，肇事者有权要求其离开。
应对措施
- 沟通协商：肇事者或其家属可先尝试与伤者家属进行友好沟通，了解他们的诉求和困难，看是否能在合理范围内达成和解，比如协商赔偿方案、医疗费用承担等，以化解矛盾，促使伤者家属主动离开。
- 报警处理：如果沟通无果，伤者家属仍然拒绝离开，肇事者应立即报警。警方到场后，会依据相关法律法规对伤者家属进行劝离。若伤者家属不听劝告，警方有权采取强制措施，将其带离现场，以维护肇事者的合法权益和住宅秩序。
- 寻求调解：可以请求当地的人民调解委员会、社区居委会或村委会等基层调解组织介入调解。这些调解组织具有中立性和专业性，能够从公平、公正的角度出发，协助双方进行协商，提出合理的解决方案，促使双方达成调解协议，解决纠纷。
- 提起诉讼：若伤者家属的行为给肇事者造成了其他损失，如精神损害、财产损失等，肇事者可以在收集相关证据后，向人民法院提起民事诉讼，要求伤者家属承担相应的民事责任，如赔偿损失、赔礼道歉等。
关于调解的注意事项
- 调解的自愿性：调解必须基于双方当事人的自愿，任何一方都不得强迫对方接受调解或调解结果。如果伤者家属不愿意调解，或者调解过程中无法达成一致意见，调解程序可以终止，双方可以通过其他途径解决纠纷。
- 调解协议的效力：经调解达成协议的，应当制作调解协议书。调解协议书具有法律约束力，双方当事人应当按照约定履行。如果一方不履行调解协议，另一方可以向人民法院提起诉讼，要求对方履行协议或承担违约责任。
在处理此类纠纷时，肇事者应保持冷静和理智，避免与伤者家属发生冲突，通过合法、合理的途径解决问题。如果还有其他疑问，欢迎继续向我咨询。