结论：房屋出现安全事故时，是否可以“赶人”（即要求租户或居住人搬离）需视具体情况而定，不能一概而论。以下从不同角度进行分析：

1. 租赁关系中的情况

• 合同约定：首先，应查看租赁合同中是否有关于房屋安全问题的特别约定。如果合同中明确规定了在房屋出现安全隐患时，出租方有权要求租户搬离，并且租户需配合，那么在此情况下，出租方可以依据合同要求租户搬离。
• 法定解除权：即使合同中没有明确约定，如果房屋的安全问题严重到影响租户的正常居住，甚至威胁到租户的生命安全，根据《民法典》的相关规定，租户也有权要求解除合同并搬离。反之，如果出租方认为房屋存在安全隐患，但租户认为不影响居住，双方可能产生争议。此时，出租方通常不能单方面“赶人”，而应通过法律途径解决，如申请法院裁定解除合同。
• 维修义务：出租方有义务确保房屋符合居住安全标准。如果房屋出现安全问题，出租方应首先承担维修义务。在维修期间，如果租户无法继续居住，出租方可能需要提供临时住所或减免租金等补偿措施。

2. 自有房屋中的情况

• 居住人权利：对于自有房屋，如果居住人是房屋的所有权人或合法使用人（如家庭成员），那么他们享有居住权，除非存在法定或约定的解除条件，否则不能被随意“赶出”。
• 安全隐患处理：如果房屋出现安全隐患，所有权人或使用人应及时采取措施进行修复。如果安全隐患严重到无法继续居住，他们可能需要自行寻找临时住所，并在修复后返回。在此过程中，不存在“赶人”的问题，而是居住人基于自身安全考虑的主动行为。

3. 特殊情况：政府征收或拆迁

• 政府行为：如果房屋因政府征收、拆迁等原因需要拆除，且该决定已经合法程序作出并公告，那么居住人（无论是租户还是所有权人）都需要按照政府的要求搬离。在此情况下，“赶人”是政府行为的体现，而非个人行为。
• 补偿与安置：政府应依法对居住人进行补偿和安置，确保他们的合法权益不受侵害。

4. 法律建议

• 协商解决：在房屋出现安全问题时，各方应首先尝试通过协商解决问题。出租方可以与租户协商维修方案、临时住所安排等；所有权人可以与家庭成员协商修复房屋或寻找临时住所等。
• 法律途径：如果协商无果，各方可以通过法律途径解决争议。例如，出租方可以起诉要求解除合同并要求租户搬离；租户可以起诉要求出租方承担维修义务或赔偿损失等。
• 及时咨询：由于房屋安全问题可能涉及复杂的法律关系和事实认定，建议各方在出现问题时及时咨询专业律师，以便更好地维护自己的合法权益。

总结：房屋出现安全事故时，是否可以“赶人”需根据具体情况判断。在处理此类问题时，各方应遵守法律法规和合同约定，通过协商或法律途径解决争议，确保自己的合法权益不受侵害。如果您在处理此类问题时遇到法律难题，可以直接向我咨询。