结论：根据对方身份证地址找到对方家人，这一行为本身并不直接构成违法，但具体是否违法需结合行为方式、目的及造成的后果等因素综合判断。以下从不同角度进行分析：

一、行为本身不直接违法

1. 信息获取的合法性：身份证地址是公民个人信息的一部分，但仅凭身份证地址本身，并不直接涉及非法获取或泄露公民个人信息的违法行为。如果身份证地址是通过合法途径（如公开信息、合法查询等）获得的，那么使用这一信息去寻找对方家人，在行为方式上并不直接违法。

2. 行为目的的考量：如果寻找对方家人的目的是合法的，比如为了进行正常的社交活动、解决纠纷（在合法范围内）或寻求帮助等，那么这一行为通常不会被视为违法。

二、可能构成违法的情形

1. 非法侵入住宅：如果通过身份证地址找到对方家人后，未经允许非法侵入其住宅，那么这一行为就违反了《中华人民共和国刑法》中关于非法侵入住宅罪的规定。非法侵入住宅罪是指违背住宅内成员的意愿或无法律依据，进入公民住宅，或进入后要求退出而拒不退出的行为。

2. 侵犯隐私权：如果寻找对方家人的过程中，泄露了对方的隐私信息（如未经允许公开其身份证地址、家庭情况等），或者以骚扰、威胁等方式与对方家人接触，那么可能构成侵犯隐私权或寻衅滋事等违法行为。根据《中华人民共和国民法典》的相关规定，自然人享有隐私权，任何组织或者个人不得以刺探、侵扰、泄露、公开等方式侵害他人的隐私权。

3. 其他违法行为：如果寻找对方家人的行为伴随着其他违法行为，如诈骗、敲诈勒索等，那么这些行为将分别受到相应的法律制裁。

三、法律建议

1. 合法合规：在寻找对方家人的过程中，应确保行为方式合法合规，不侵犯他人的合法权益。如果需要通过法律途径解决纠纷或寻求帮助，建议咨询专业律师或相关机构。

2. 尊重隐私：应尊重对方的隐私权和个人信息保护权，不泄露或滥用对方的个人信息。如果需要与对方家人沟通或联系，应事先征得对方的同意或遵循合法途径。

3. 避免冲突：在寻找对方家人的过程中，应保持冷静和理性，避免与对方家人发生冲突或争执。如果遇到问题或纠纷，应及时寻求法律帮助或调解解决。

如果你有具体的法律问题或需要进一步的法律帮助，可以直接向我咨询，我会根据你的具体情况提供专业的法律意见和解决方案。