结论前置：孩子爸爸不负责任，您确实可以通过法律途径争取孩子的抚养权，但具体能否成功要回抚养权，需结合实际情况和法律规定综合判断。

一、法律依据与抚养权变更条件

根据《中华人民共和国民法典》及相关司法解释，抚养权的归属和变更主要基于子女的最佳利益原则。若一方存在严重不负责任的行为，如虐待、遗弃子女，或因经济能力、生活环境等变化无法继续履行抚养义务，另一方有权向法院提起诉讼，要求变更抚养权。

具体条件包括但不限于：

1. 原抚养方存在严重过错：如长期虐待、遗弃子女，或存在赌博、吸毒等恶习，严重影响子女身心健康。
2. 原抚养方经济能力或生活环境发生重大变化：如失业、患病等，导致无法继续为子女提供良好的生活和教育条件。
3. 申请变更方具备更好的抚养条件：如经济能力更强、生活环境更稳定、与子女关系更亲密等，能够为子女提供更好的成长环境。

二、实际操作中的考量因素

在争取抚养权的过程中，法院会综合考虑以下因素：

1. 子女的年龄和性别：一般来说，年幼的子女更倾向于由母亲抚养，但并非绝对，需结合具体情况判断。
2. 子女的意愿：若子女已满八周岁，法院会尊重其真实意愿，考虑其选择与哪一方共同生活。
3. 双方的经济能力和生活环境：包括收入状况、居住条件、教育背景等，以确保子女能够获得稳定的生活和教育。
4. 双方与子女的感情基础：法院会考察双方与子女的日常互动、情感联系等，以评估哪一方更有利于子女的成长。

三、建议与策略

1. 收集证据：在提起诉讼前，您需要收集充分的证据来证明对方存在不负责任的行为，如虐待、遗弃的证据，或经济能力、生活环境发生重大变化的证明。同时，您也需要准备自己的经济能力、生活环境等方面的证据，以证明自己具备更好的抚养条件。
2. 咨询专业律师：虽然我是您的法律顾问，但每个案件都有其独特性。在提起诉讼前，建议您进一步向我详细描述具体情况，以便我为您提供更具体的法律建议和诉讼策略。
3. 注重调解：在诉讼过程中，法院可能会组织双方进行调解。调解是一种更为温和、灵活的解决方式，有助于减少对子女的伤害。因此，在诉讼过程中，您可以考虑接受调解，并尝试与对方达成抚养权变更的协议。

四、可能面临的法律后果

若法院最终判决变更抚养权，您将获得子女的抚养权，并有权要求对方支付抚养费。同时，您也需要承担起抚养子女的责任和义务，为子女提供良好的生活和教育条件。若对方拒绝履行抚养义务或支付抚养费，您可以向法院申请强制执行。

最后，抚养权变更是一个复杂而敏感的法律问题，涉及子女的切身利益。在处理此类问题时，请务必保持冷静和理性，遵循法律程序和规定。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。