男方拒绝女方回娘家祭祖，这一行为本身并不直接构成违法。不过，我们可以从多个角度来详细分析这个问题：
从法律权利的角度来看：
- 女方作为具有完全民事行为能力的成年人，享有自主决定个人事务的权利，包括是否回娘家祭祖。男方无权非法干涉女方的这一自由。若男方的行为严重到限制女方的人身自由或构成其他违法行为（如家庭暴力、非法拘禁等），则女方有权依法寻求保护，并追究男方的法律责任。但在一般情况下，单纯的拒绝行为并不直接违法。
从家庭伦理和道德的角度来看：
- 家庭成员之间应当相互尊重、理解和支持。男方拒绝女方回娘家祭祖，可能反映出家庭内部存在沟通不畅或理解不足的问题。这种情况下，建议双方通过坦诚的沟通来寻求共识，以维护家庭和谐。虽然道德层面的考量不直接涉及法律问题，但良好的家庭伦理关系对于社会的稳定和谐至关重要。
从实际影响的角度来看：
- 如果男方的拒绝行为导致女方在精神上受到严重伤害，或者影响了女方的正常生活秩序，女方可以考虑通过法律途径（如提起民事诉讼）来维护自己的合法权益。不过，这通常需要证明男方的行为构成了侵权，并且给女方造成了实际的损害。在大多数情况下，单纯的拒绝行为可能难以达到这一证明标准。
建议：
- 双方应尝试通过沟通来解决问题，理解彼此的需求和感受，以达成共识。
- 如果沟通无果，且男方的行为确实给女方造成了困扰或伤害，女方可以寻求家庭调解、心理咨询或法律援助等途径来维护自己的权益。
总之，虽然男方拒绝女方回娘家祭祖的行为本身不直接违法，但双方应重视家庭伦理和道德建设，通过沟通来解决问题，以维护家庭和谐和社会稳定。如有任何法律疑问或需要进一步的帮助，请随时向我咨询。