针对您提出的“邻居危房威胁家人安全谁来管”的问题，结论前置如下：
- 您可以首先向当地的房屋安全管理部门或城市管理部门进行投诉和举报。这些部门通常负责房屋安全的监管工作，有权对存在安全隐患的房屋进行调查和处理。
详细分析如下：
房屋安全管理部门或城市管理部门的职责：
- 根据相关法律法规，房屋安全管理部门或城市管理部门有责任对辖区内的房屋安全状况进行监管。当发现房屋存在安全隐患，特别是可能危及相邻房屋或人员安全时，这些部门应当及时介入，要求房屋所有人或使用人采取必要的措施消除隐患。
- 在您的情况下，如果邻居的房屋确实存在安全隐患，且这种隐患已经或可能对您的家人安全构成威胁，那么您有权向这些部门投诉和举报。
投诉和举报的流程：
- 您需要准备相关的证据材料，如照片、视频或书面描述，以证明邻居房屋确实存在安全隐患。
- 前往当地的房屋安全管理部门或城市管理部门，提交投诉和举报材料，并详细说明情况。
- 等待相关部门的调查和处理结果。如果部门认为需要采取进一步措施，如要求邻居进行修缮或加固房屋，那么他们会依法进行。
其他可能的途径：
- 协商解决：在投诉和举报之前，您也可以尝试与邻居进行协商，看是否能够达成一致意见，共同解决问题。这通常是最快捷、最经济的解决方式。
- 法律途径：如果协商无果，且邻居拒绝采取任何措施消除隐患，那么您可能需要考虑通过法律途径来维护自己的权益。这可能包括向法院提起诉讼，要求邻居承担因房屋安全隐患给您造成的损失，或者要求法院强制邻居采取必要的措施消除隐患。
建议与提醒：
- 在处理此类问题时，请务必保持冷静和理性，避免与邻居发生不必要的冲突。
- 保留好所有相关的证据材料，以备不时之需。
- 如果您对法律程序不熟悉，或者担心自己的权益无法得到充分保障，那么您可以考虑咨询专业的律师，如我本人郭奕飞，以获取更具体的法律建议和帮助。
希望以上分析能够对您有所帮助。如果您还有其他问题或需要进一步的法律咨询，请随时向我提问。