结论：婚内出轨对方家人打你、手机扣留的行为均可能构成违法。
一、关于对方家人打你的行为
法律定性：
- 根据《中华人民共和国治安管理处罚法》第四十三条：“殴打他人的，或者故意伤害他人身体的，处五日以上十日以下拘留，并处二百元以上五百元以下罚款；情节较轻的，处五日以下拘留或者五百元以下罚款。” 若对方家人的行为构成殴打或故意伤害，且情节严重，还可能触犯《中华人民共和国刑法》中的故意伤害罪。
法律后果：
- 对方家人可能面临行政处罚，如拘留、罚款。
- 若造成严重后果，如轻伤以上，还可能承担刑事责任。
建议：
- 立即报警，保留相关证据，如伤情照片、医疗记录等。
- 考虑向法院提起民事诉讼，要求对方家人赔偿因殴打行为造成的损失，包括医疗费、误工费等。
二、关于手机扣留的行为
法律定性：
- 手机属于个人财产，扣留他人手机可能构成对他人财产权的侵犯。根据《中华人民共和国民法典》的相关规定，任何组织或者个人不得侵占、哄抢、私藏、私分、破坏他人的合法财产。
- 若扣留手机的行为伴随有威胁、恐吓等手段，还可能构成其他违法行为，如敲诈勒索等。
法律后果：
- 扣留者可能面临民事赔偿，需返还手机并赔偿因扣留行为造成的损失。
- 若行为严重，还可能承担行政责任或刑事责任。
建议：
- 要求对方立即返还手机，并保留相关证据，如扣留手机的现场照片、视频或证人证言。
- 若对方拒绝返还，可向公安机关报案，或考虑向法院提起民事诉讼，要求对方返还手机并赔偿损失。
三、综合建议
- 保留证据：在处理此类纠纷时，务必保留好相关证据，如伤情照片、医疗记录、扣留手机的证据等。这些证据将在后续的法律程序中起到关键作用。
- 及时报警：若遭遇对方家人的殴打或手机扣留等违法行为，应立即报警，以便公安机关及时介入调查。
- 寻求法律帮助：在处理此类纠纷时，可考虑咨询专业律师，以获取更全面的法律建议和帮助。
有问题可以直接向我咨询，作为专业律师，我将根据您的具体情况提供针对性的法律建议。