结论：若协议离婚时约定孩子归女方抚养，但实际由男方抚养，这可能会引发一系列法律问题和实际纠纷。关键在于双方需明确抚养权的归属，并严格按照协议或法院判决执行。以下是对此问题的详细分析：
一、协议的法律效力
首先，需要明确的是，离婚协议一旦签订并办理了离婚登记，即具有法律效力。这意味着，如果离婚协议中明确约定了孩子的抚养权归女方，那么原则上，女方应承担抚养孩子的责任。然而，如果实际生活中孩子是由男方抚养，这可能表明双方在执行协议时出现了偏差或变更。
二、实际抚养情况与协议不符的处理
沟通协商：
- 双方应首先尝试通过沟通协商解决抚养权的问题。了解彼此的实际困难和需求，看是否能够达成新的抚养安排，如变更抚养权或共同抚养等。
寻求法律途径：
- 如果沟通协商无果，任何一方都可以向法院提起诉讼，要求确认或变更抚养权。法院会根据孩子的最大利益原则，综合考虑双方的抚养能力、经济状况、孩子的生活环境等因素，作出判决。
- 在此过程中，保留好相关证据至关重要，如离婚协议、实际抚养情况的证明（如照片、视频、证人证言等）、与对方的沟通记录等。
执行法院判决：
- 一旦法院作出了关于抚养权的判决，双方必须严格遵守。如果一方不履行判决，另一方可以申请法院强制执行。
三、可能涉及的法律后果
如果女方未按照协议或法院判决履行抚养义务：
- 男方可以要求女方支付抚养费或承担其他抚养责任。
- 如果女方拒不履行，男方可以申请法院强制执行，包括冻结银行账户、查封财产等措施。
- 在极端情况下，女方甚至可能因拒不执行法院判决而被追究刑事责任。
如果男方实际抚养了孩子但未获得抚养权：
- 男方可以与女方协商变更抚养权或共同抚养。
- 如果协商不成，男方可以向法院提起诉讼，要求确认或变更抚养权。
- 在诉讼过程中，男方需要提供充分的证据证明自己更适合抚养孩子，如经济能力、生活环境、与孩子的感情等。
四、建议与注意事项
明确抚养权归属：
- 在签订离婚协议时，双方应明确抚养权的归属，并尽可能详细地约定抚养费的支付方式、时间、金额等事项。
保持沟通：
- 离婚后，双方应保持沟通，及时了解孩子的生活情况和需求，共同为孩子的成长创造良好的环境。
尊重法院判决：
- 如果双方无法就抚养权问题达成一致，应尊重法院的判决，并严格按照判决执行。
关注孩子的身心健康：
- 在处理抚养权纠纷时，双方应始终以孩子的最大利益为出发点，避免对孩子造成不必要的伤害。
示例说明：假设张先生和李女士离婚时约定孩子归李女士抚养，但实际生活中孩子一直由张先生抚养。如果张先生希望继续抚养孩子，他可以与李女士协商变更抚养权或共同抚养。如果协商不成，张先生可以向法院提起诉讼，要求确认或变更抚养权。在诉讼过程中，张先生需要提供充分的证据证明自己更适合抚养孩子。
如有更多关于婚姻家庭领域的法律问题，可以直接向我咨询。我会根据你的具体情况，为你提供专业、全面的法律建议。