结论前置：别人干扰您的家是否违法，这取决于干扰的具体行为和程度，但通常情况下，未经允许干扰他人住宅可能构成违法行为，侵犯您的人格权中的隐私权或安宁权。
详细分析：
从隐私权角度分析：
- 隐私权是人格权的重要组成部分，它保护个人的私生活安宁和不愿为他人知晓的私密空间、私密活动、私密信息。
- 如果别人未经您的允许，擅自进入您的家，或者通过其他方式（如窥视、窃听等）干扰您的私生活安宁，这很可能构成对隐私权的侵犯。
- 根据相关法律法规，侵犯隐私权的行为可能需要承担民事责任，如停止侵害、赔礼道歉、赔偿损失等。
从安宁权角度分析：
- 安宁权是指个人享有的生活安宁和不受他人干扰的权利。
- 如果别人的行为（如频繁骚扰、制造噪音等）严重干扰了您的正常生活，使您无法享受安宁的生活环境，这也可能构成对安宁权的侵犯。
- 在这种情况下，您同样有权要求侵权人停止侵害，并可能要求其承担相应的民事责任。
特殊情况考虑：
- 当然，并非所有干扰行为都构成违法。例如，如果是紧急情况下的必要进入（如救火、救人等），或者经过您明确同意的进入，通常不构成违法。
- 另外，如果干扰行为并未达到侵犯隐私权或安宁权的程度，而是轻微的、偶尔的，可能不构成法律上的侵权，但仍然可能违反社会公德或道德规范。
法律建议：
- 如果您认为别人的行为已经侵犯了您的隐私权或安宁权，首先可以尝试与对方沟通，要求其停止侵害。
- 如果沟通无果，您可以考虑向相关部门（如公安机关、社区调解组织等）寻求帮助，或者通过法律途径（如提起民事诉讼）来维护自己的合法权益。
- 在处理此类纠纷时，建议您保留好相关证据（如监控录像、录音、证人证言等），以便在需要时提供证明。
可能法律后果：
- 如果侵权行为被认定成立，侵权人可能需要承担停止侵害、赔礼道歉、赔偿损失等民事责任。
- 在某些严重情况下，如果侵权行为同时触犯了刑法（如非法侵入住宅罪等），侵权人还可能面临刑事责任的追究。
总之，别人干扰您的家是否违法，需要根据具体情况来判断。如果您认为自己的权益受到了侵害，建议及时寻求法律帮助，以维护自己的合法权益。有问题可以直接向我咨询，我会根据您的具体情况提供更详细的法律建议。