结论是：男人不负责是否可以告他，这取决于“不负责”的具体表现以及造成的法律后果，不同情况有不同的处理方式。以下从几个常见角度进行分析：

1. 如果“不负责”表现为遗弃家庭成员：

   • 法律背景：根据《中华人民共和国民法典》的相关规定，家庭成员间应当敬老爱幼，互相帮助，维护平等、和睦、文明的婚姻家庭关系。禁止家庭暴力，禁止家庭成员间的虐待和遗弃。如果一方有遗弃家庭成员的行为，另一方可以依法提起诉讼。
   • 法律建议：若男方存在遗弃行为，如长期不回家、不履行抚养义务等，女方可以收集相关证据（如邻居证言、社区证明、银行转账记录等证明男方未履行抚养义务），向法院提起诉讼，要求男方承担法律责任，并可能要求赔偿。

2. 如果“不负责”表现为不履行抚养义务：

   • 法律背景：父母对子女有抚养教育的义务，这一义务不因父母离婚而消除。如果男方不履行抚养义务，子女或其法定代理人（如母亲）有权要求男方支付抚养费。
   • 法律建议：在这种情况下，女方可以代表子女向法院提起诉讼，要求男方支付拖欠的抚养费，并可能要求增加未来的抚养费数额。法院会根据子女的实际需要、父母的负担能力和当地的实际生活水平等因素来确定抚养费的数额。
   • 计算公式（若涉及抚养费计算）：抚养费一般可按其月总收入的百分之二十至三十的比例给付。负担两个以上子女抚养费的，比例可适当提高，但一般不得超过月总收入的百分之五十。具体数额需根据实际情况和法院判决确定。

3. 如果“不负责”表现为婚内过错行为（如出轨、家暴等）：

   • 法律背景：虽然这些行为可能不直接构成犯罪（除非达到犯罪程度，如重婚、故意伤害等），但它们违反了婚姻中的忠诚和尊重义务，可能构成离婚时的过错行为。
   • 法律建议：若男方存在婚内过错行为，女方在离婚时可以主张多分财产，并可能要求男方支付离婚损害赔偿。为了证明男方的过错行为，女方需要收集相关证据，如聊天记录、照片、视频、医疗记录等。

4. 如果“不负责”仅表现为一般性的不关心、不体贴：

   • 法律分析：这种情况下，男方的行为可能不构成法律上的过错或违法行为，因此难以直接通过法律途径追究其责任。但女方可以尝试通过沟通、婚姻咨询等方式来改善夫妻关系。

总结与建议：面对男方“不负责”的情况，女方应首先明确“不负责”的具体表现和法律后果，然后根据实际情况选择合适的法律途径来维护自己的权益。在采取行动前，建议咨询专业律师以获取更具体的法律建议。如果你有具体的法律问题或需要进一步的帮助，请直接向我咨询。