结论：不让他回家并对其进行骚扰的行为，是否犯法需根据具体行为性质和后果来判断，可能涉及侵犯人身自由权、寻衅滋事或非法侵入住宅等违法行为。

分析说明：

1. 侵犯人身自由权：

   • 如果骚扰行为包括限制他人自由出入其住所，例如通过堵门、威胁等方式阻止他人回家，这可能构成对他人人身自由权的侵犯。根据《中华人民共和国民法典》的相关规定，自然人享有的人身自由权受法律保护，任何组织或者个人不得以非法方式侵害。

2. 寻衅滋事：

   • 如果骚扰行为表现为无理取闹、肆意挑衅、扰乱他人正常生活秩序等，且情节严重，可能构成寻衅滋事。根据《中华人民共和国治安管理处罚法》的相关规定，寻衅滋事行为会受到行政处罚，如罚款、拘留等。若情节特别严重，还可能构成寻衅滋事罪，需承担刑事责任。

3. 非法侵入住宅：

   • 如果骚扰者未经允许强行进入他人住宅，或者经要求退出而拒不退出，这可能构成非法侵入住宅。根据《中华人民共和国刑法》的相关规定，非法侵入他人住宅的，处三年以下有期徒刑或者拘役。

特殊场景：

• 在婚姻家庭关系中，如果骚扰行为发生在夫妻之间或家庭成员之间，且情节轻微，可能首先通过调解、协商等方式解决。然而，如果行为性质恶劣，如家庭暴力、长期骚扰等，则可能涉及更严重的法律责任，包括刑事责任。

行动建议：

• 保留证据：如果遭遇此类骚扰，应尽可能保留相关证据，如视频、音频、短信、聊天记录等，以便后续维权。
• 报警处理：在情况紧急或无法自行解决时，应及时向公安机关报案，寻求法律保护。
• 法律咨询：对于复杂的法律问题，建议咨询专业律师，以便根据具体情况制定合适的维权策略。

法律后果：

• 根据骚扰行为的性质和后果，骚扰者可能面临行政处罚、民事赔偿或刑事责任等不同的法律后果。例如，因寻衅滋事被行政处罚的，可能面临罚款或拘留；因非法侵入住宅被判刑的，则可能面临有期徒刑或拘役等刑罚。

如有更多细节或疑问，可以直接向我咨询，我会根据你的具体情况提供更详细的法律建议。