对方和你亲人互相辱骂，并且骂到你的全家，这种情况下的法律判断会依据辱骂的情节轻重以及造成的后果来综合考虑。以下是从民事和刑事两个角度进行的分析：
民事侵权角度：
- 若对方的辱骂行为构成民事侵权，即侵犯了你及你家人的名誉权，你可以要求对方承担停止侵害、恢复名誉、消除影响、赔礼道歉以及赔偿精神损害抚慰金等责任。
- 在实践中，你需要收集相关证据，如辱骂的言辞、视听资料等，以证明对方的侵权行为。随后，你可以通过协商或提起民事诉讼的方式来解决纠纷。
刑事犯罪角度：
- 若对方的辱骂行为情节严重，构成侮辱罪，这属于刑事自诉案件，你可以向法院提起刑事自诉，要求追究对方的刑事责任。
- 根据《刑法》的规定，侮辱罪一般处三年以下有期徒刑、拘役、管制或者剥夺政治权利。具体刑罚的轻重会由法院根据侮辱的手段、场合、行为造成的后果等因素来综合判定。
综上所述，对于对方辱骂你全家的行为，你可以根据具体情况选择从民事或刑事角度进行维权。在维权过程中，务必保持冷静，理性处理，并收集好相关证据以支持你的主张。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。