结论：在离婚协议中约定了小孩子跟男方回去过年，但小孩自己不想回去的情况下，需要综合考虑孩子的年龄、意愿以及离婚协议的约定等多方面因素来处理。

分析角度一：孩子的年龄与意愿

1. 孩子年龄较小：如果孩子年龄较小，可能无法准确表达自己的真实意愿，或者其意愿容易受到外界影响。在这种情况下，父母应当更多地从孩子的利益出发，考虑哪种安排更有利于孩子的身心健康和成长。如果男方能够提供一个温馨、安全的过年环境，且离婚协议中有明确约定，那么从维护协议稳定性和孩子利益的角度出发，可以尝试说服孩子跟随男方回去过年。

2. 孩子年龄较大且意愿明确：随着孩子年龄的增长，他们的自主意识和判断能力逐渐增强。如果孩子已经能够清晰、明确地表达自己不想跟随男方回去过年的意愿，并且这种意愿是基于合理的考虑（如与男方关系疏远、在男方家感到不适等），那么父母应当尊重孩子的选择。毕竟，孩子的幸福和健康成长是父母最关心的。

分析角度二：离婚协议的约定与执行

1. 协议具有法律效力：离婚协议是父母双方在离婚时达成的关于子女抚养、财产分割等事项的约定，具有法律效力。如果协议中明确约定了小孩子跟男方回去过年，那么双方原则上应当遵守这一约定。

2. 协议可变更与协商：然而，法律也允许在特定情况下对离婚协议进行变更或协商。如果孩子明确表示不想跟随男方回去过年，且这种变更不会对孩子造成不利影响，父母双方可以协商修改协议中的相关条款。如果协商不成，也可以寻求法律途径解决，但通常法院会优先考虑孩子的利益和意愿。

分析角度三：法律后果与责任

1. 违反协议的法律后果：如果一方违反离婚协议中的约定，另一方有权要求其承担违约责任。但在涉及子女抚养的问题上，法院会更加谨慎地处理，以确保孩子的利益不受损害。因此，即使男方坚持要求孩子跟随其回去过年，如果孩子明确表示不愿意，且这种要求可能对孩子造成不利影响，法院可能不会支持男方的诉求。

2. 父母的责任与义务：无论离婚协议如何约定，父母双方都有抚养、教育子女的责任和义务。这意味着父母应当关注孩子的需求和感受，尽力为孩子提供一个稳定、和谐的成长环境。在处理孩子跟随哪方过年等问题时，父母应当充分考虑孩子的意愿和利益，避免因为个人情绪或利益冲突而损害孩子的权益。

建议：

• 沟通协商：首先，父母双方应当进行充分的沟通协商，了解孩子的真实意愿和需求，尝试达成一个双方都能接受的解决方案。
• 尊重孩子意愿：如果孩子已经能够表达自己的意愿，且这种意愿是合理、明确的，父母应当尊重孩子的选择，避免强迫孩子做出不符合其意愿的决定。
• 寻求法律帮助：如果父母双方无法就孩子的过年安排达成一致意见，可以寻求法律帮助或咨询专业律师，以了解相关法律规定和程序，确保孩子的利益得到妥善保护。

总之，在处理离婚协议中约定的小孩子跟男方回去过年但小孩自己不想回去的问题时，需要综合考虑多方面因素，确保孩子的利益得到最大程度的保护。如果有任何疑问或需要进一步的法律帮助，请随时向我咨询。