结论：是否违法需视具体情况而定，不能一概而论。以下从不同角度为你详细分析：
若双方为恋爱关系，且无其他特殊情形
- 在恋爱关系中，双方都是独立的个体，享有自由行动的权利。如果只是单纯地不让女朋友回家，没有涉及到限制人身自由、威胁、恐吓等违法行为，那么这种行为一般不构成违法。但这种行为可能会伤害双方的感情，影响恋爱关系的健康发展。例如，一方因为生气或者想控制对方而阻止其回家，虽然不违法，但从情感和道德层面来说，是不恰当的。
若存在限制人身自由的行为
- 如果不让女朋友回家的行为伴随着限制其人身自由，比如将其囚禁在某个地方、阻止其与外界联系等，那么这种行为就可能构成非法拘禁罪。根据《中华人民共和国刑法》的相关规定，非法拘禁他人或者以其他方法非法剥夺他人人身自由的，处三年以下有期徒刑、拘役、管制或者剥夺政治权利。具有殴打、侮辱情节的，从重处罚。在这种情况下，不让女朋友回家的行为就严重违法了。
若涉及家庭暴力或虐待
- 如果不让女朋友回家的行为是家庭暴力或虐待的一部分，比如经常性地阻止其回家，对其进行身体或精神上的折磨，那么这种行为不仅违法，还可能构成犯罪。家庭暴力是指家庭成员之间以殴打、捆绑、残害、限制人身自由以及经常性谩骂、恐吓等方式实施的身体、精神等侵害行为。根据《中华人民共和国反家庭暴力法》的相关规定，加害人实施家庭暴力，构成违反治安管理行为的，依法给予治安管理处罚；构成犯罪的，依法追究刑事责任。
建议：
- 在恋爱或家庭关系中，双方应该相互尊重、理解和支持，避免采取过激或违法的行为来解决问题。
- 如果遇到不让回家等类似情况，且感觉自身权益受到侵害，应该及时与对方沟通，寻求合理的解决方案。
- 如果沟通无果，或者情况严重，涉及违法犯罪行为，应该及时向公安机关报案，或者寻求法律援助，维护自己的合法权益。
如果你有进一步的法律问题或者需要更具体的法律建议，可以直接向我咨询，我会根据你的具体情况为你提供专业的法律帮助。