针对您提出的“自己负责的部门出了安全事故谁负责”的问题，首先我们要明确的是，安全事故的责任归属通常涉及多个层面，包括直接责任人、管理人员、以及单位或组织的整体责任。以下是对此问题的详细分析：
直接责任人：
- 如果安全事故是由于某个或某些员工的直接行为（如违反操作规程、疏忽大意等）导致的，那么这些员工通常会被视为直接责任人。他们需要承担相应的法律责任，可能包括赔偿损失、接受行政处罚等。
管理人员责任：
- 管理人员（如部门主管、安全负责人等）如果未能履行其安全管理职责，如未制定或执行有效的安全管理制度、未进行必要的安全培训、未及时发现和纠正安全隐患等，也可能对安全事故的发生负有责任。在这种情况下，管理人员可能需要承担管理责任，包括但不限于行政处分、罚款等。
单位或组织责任：
- 单位或组织作为整体，也可能对安全事故承担责任。这通常发生在单位或组织未能履行其安全生产主体责任的情况下，如未建立健全安全生产责任制、未提供必要的安全生产条件、未按规定进行安全投入等。单位或组织可能需要承担的责任包括赔偿损失、接受行政处罚、整改等。
综上所述，安全事故的责任归属是一个复杂的问题，需要根据具体情况进行综合分析。在您的案例中，如果您是部门负责人，且安全事故的发生与您的管理职责有关，那么您可能需要承担一定的管理责任。但具体责任大小、责任形式等还需根据事故的具体情况、相关法律法规以及单位内部的规章制度来确定。
因此，我建议您在事故发生后，立即配合相关部门进行调查，查明事故原因和责任归属。同时，您也可以咨询专业的法律顾问（如我），以便更好地了解您的法律责任和应对策略。