结论：您所描述的“让男方签字不管什么时候不得要回孩子”的合同，在法律上可能并不完全生效，或者其效力会受到诸多限制。以下从多个角度进行详细分析：
合同性质与内容合法性：
- 首先，需要明确的是，涉及人身关系的协议，特别是关于子女抚养权的协议，其性质与一般的财产合同存在显著差异。子女抚养权不仅关乎父母双方的权益，更直接影响到子女的身心健康和成长环境。
- 根据《中华人民共和国民法典》的相关规定，民事法律行为不得违反法律、行政法规的强制性规定，不得违背公序良俗。因此，任何试图通过合同形式永久剥夺一方对子女的抚养权或探视权的条款，都可能因违反法律强制性规定或公序良俗而被认定为无效。
子女利益最大化原则：
- 在处理子女抚养权问题时，法院始终遵循“子女利益最大化”原则。这意味着，无论父母双方有何约定，法院在判决或调解时都会优先考虑子女的身心健康、成长环境、教育需求等因素。
- 因此，即使男方签署了“不得要回孩子”的合同，如果未来情况发生变化（如男方经济状况改善、子女意愿改变等），且要求变更抚养权更有利于子女成长，法院仍有可能支持男方的请求。
合同的实际履行与变更：
- 合同的履行受到多种因素的影响，包括但不限于双方的经济状况、生活环境、健康状况等。如果未来出现重大变化，导致原合同无法继续履行或履行对一方明显不公平，双方可以协商变更合同内容。
- 在子女抚养权问题上，由于涉及子女的切身利益，任何变更都需要经过法院的审查和批准，以确保变更符合子女的最佳利益。
法律建议：
- 鉴于上述分析，我建议您不要单纯依赖一份“不得要回孩子”的合同来保障子女的抚养权。相反，您应该与男方进行坦诚的沟通，共同协商制定一个既符合双方利益又有利于子女成长的抚养计划。
- 如果双方无法达成一致，您可以考虑通过法律途径解决争议。在此过程中，请务必保留好相关证据（如沟通记录、子女生活照片、视频等），以证明您的抚养能力和子女的成长环境。
- 同时，我也建议您咨询专业的婚姻家庭律师，以获取更具体、更个性化的法律建议。
总结与进一步思考：子女抚养权问题复杂且敏感，涉及多方面的法律权益和利益平衡。因此，在处理此类问题时，请务必谨慎行事，并充分考虑子女的最佳利益。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。