结论：您描述的情况是否构成安全生产事故，需结合具体情形判断，但大概率可能被认定为安全生产事故，且您作为雇主可能需承担相应法律责任。以下从不同角度为您详细分析：
一、是否构成安全生产事故的判断标准
根据《生产安全事故报告和调查处理条例》的相关规定，生产安全事故是指生产经营活动中发生的造成人身伤亡或者直接经济损失的事故。判断您的情况是否构成安全生产事故，主要看以下几点：
是否属于生产经营活动：
- 您雇人拆房子，这一行为本身属于一种生产经营活动，即使您可能并非专业的建筑公司或施工单位，但只要涉及雇佣他人进行有偿的拆房工作，就符合生产经营活动的特征。
是否造成人身伤亡：
- 墙倒了把干活的人砸死，显然已经造成了人身伤亡，这是构成生产安全事故的重要条件之一。
是否涉及安全生产管理问题：
- 安全生产事故通常与安全生产管理不善有关。在您的情况下，如果拆房过程中没有采取必要的安全措施，如设置警示标志、提供安全防护装备等，或者没有确保施工人员的安全培训，那么就可能存在安全生产管理问题。
二、您作为雇主可能承担的法律责任
民事赔偿责任：
- 根据《民法典》的相关规定，您作为雇主，对雇员在从事雇佣活动中遭受的人身损害，应当承担赔偿责任。这意味着您可能需要支付死亡赔偿金、丧葬费、被扶养人生活费等费用。
行政责任：
- 如果该事故被认定为安全生产事故，且您作为雇主存在安全生产管理不善的情况，那么您可能面临安全生产监督管理部门的行政处罚，如罚款、责令停产停业整顿等。
刑事责任：
- 在极端情况下，如果您的行为构成重大责任事故罪或其他相关犯罪，您还可能面临刑事追究。这通常要求您的行为存在严重的过失或故意，且导致了严重的后果。
三、建议与措施
立即报告相关部门：
- 一旦发生此类事故，您应立即向当地的安全生产监督管理部门报告，并配合相关部门的调查和处理工作。
积极赔偿受害者家属：
- 您应尽快与受害者家属协商赔偿事宜，并按照法律规定支付相应的赔偿费用。这有助于减轻您的法律责任，并维护您的社会声誉。
加强安全生产管理：
- 在未来的生产经营活动中，您应加强安全生产管理，确保施工人员的安全培训、提供必要的安全防护装备、设置警示标志等，以防止类似事故的再次发生。
咨询专业律师：
- 由于此类事故涉及复杂的法律问题，我建议您咨询专业律师以获取更具体的法律建议和指导。作为专注于劳动纠纷和建设工程领域的律师，我可以为您提供专业的法律服务。
如果您有任何进一步的法律问题或需要进一步的帮助，请随时向我咨询。