结论：不可以直接去肇事者家里找人。这种行为可能涉及侵犯他人住宅权、隐私权等合法权益，甚至可能引发新的法律纠纷。
分析：
法律角度：
- 住宅权保护：根据我国法律，公民的住宅不受侵犯。未经允许，任何人不得非法侵入或搜查他人的住宅。因此，直接去肇事者家里找人可能构成非法侵入住宅，面临法律责任。
- 隐私权保护：肇事者的家庭住址、生活情况等属于其个人隐私范畴。未经许可，不得擅自打听或公开。直接去家里找人可能侵犯其隐私权。
- 事故处理程序：交通事故的处理应遵循法定程序。如果肇事者不履行赔偿等义务，应通过法律途径解决，如向法院提起诉讼、申请强制执行等，而非私自采取行动。
实际操作角度：
- 可能引发冲突：直接去肇事者家里找人可能引发双方之间的冲突和矛盾，不利于问题的解决。甚至可能因情绪激动而做出过激行为，导致事态升级。
- 影响证据收集：在未经法律程序的情况下，私自与肇事者接触可能影响后续证据的收集和法律程序的进行。例如，肇事者可能因此销毁或隐藏相关证据。
建议：
通过法律途径解决：
- 如果肇事者不履行赔偿等义务，可以向法院提起诉讼，要求其承担相应的法律责任。
- 在获得法院判决后，如果肇事者仍不履行义务，可以申请强制执行，由法院采取强制措施迫使其履行。
寻求警方协助：
- 如果肇事者存在逃避责任、拒不配合等行为，可以向警方报案，寻求警方的协助和调查。
- 警方有权对肇事者进行传唤、询问等调查措施，以推动事故的解决。
保持冷静和理性：
- 在处理交通事故时，应保持冷静和理性，避免情绪化行为。
- 通过合法、合理的途径解决问题，维护自己的合法权益。
后续行动：
- 如果您已经采取了不当行为（如直接去肇事者家里找人），建议立即停止并咨询专业律师，了解可能面临的法律责任和补救措施。
- 如果您尚未采取行动，但担心肇事者不履行义务，建议尽快咨询律师，制定合适的法律策略，以维护自己的合法权益。
总之，处理交通事故应遵循法定程序，通过法律途径解决问题。直接去肇事者家里找人不仅可能违法，还可能引发新的法律纠纷和冲突。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。