如果工伤不赔，用人部门是否需要赔偿人身损害，这主要取决于具体的法律关系和事实情况。下面我从几个角度为你详细分析：

1. 工伤保险责任与用人部门责任：

   • 在一般情况下，如果员工遭受工伤，并且已经参加了工伤保险，那么应由工伤保险基金承担主要的赔偿责任，包括医疗费用、康复费用、一次性伤残补助金等。
   • 如果用人部门未依法参加工伤保险，那么原本应由工伤保险基金承担的费用，将转由用人部门承担。

2. 人身损害赔偿与工伤赔偿的关系：

   • 人身损害赔偿通常适用于因侵权行为导致的人身伤害，而工伤赔偿则是基于劳动关系和工伤保险制度。
   • 在工伤情况下，员工通常不能同时主张人身损害赔偿和工伤赔偿，因为两者在性质、目的和赔偿范围上存在差异。
   • 但是，如果工伤是由于用人部门或第三人的过错造成的，并且这种过错超出了工伤保险的范围，那么员工在获得工伤赔偿后，仍有权向用人部门或第三人主张人身损害赔偿的差额部分。

3. 用人部门可能承担的其他责任：

   • 如果用人部门存在违反安全生产法律法规、未提供必要的劳动保护措施等过错，导致员工发生工伤，那么用人部门除了承担工伤保险责任外，还可能面临行政处罚和民事赔偿责任。
   • 在某些情况下，如果员工因工伤导致死亡或严重残疾，用人部门还可能需要承担一定的精神损害赔偿责任。

综上所述，如果工伤不赔，用人部门是否需要赔偿人身损害，需要根据具体情况来判断。如果用人部门存在过错或未依法履行工伤保险义务，那么它可能需要承担相应的赔偿责任。如果你在这方面有具体的法律问题或疑虑，可以直接向我咨询，我会根据你的具体情况为你提供更详细的法律建议。