当对方骂人时，你骂回去是否犯法，需根据具体情况判断。一般情况下不构成违法犯罪，但在某些情况下可能构成违法行为甚至犯罪。以下是对此问题的详细分析：

一、一般情况不构成违法犯罪

如果双方只是进行了轻微、简短的辱骂，并未对对方的名誉、精神等方面造成实质性损害，这种行为通常不会被认定为违法。此时，它更可能被视为一般的民事纠纷或不文明行为，主要受到道德层面的谴责。例如，在私人场合中，双方因一时口角而发生的轻微辱骂，通常不会引发法律责任。

二、可能构成违法行为的情况

1. 违反《治安管理处罚法》：

   • 若辱骂行为情节较重，如使用极其污秽、恶毒的语言，在公众场合进行辱骂导致周围人围观，扰乱了公共秩序，或者对对方造成了精神伤害，依据《中华人民共和国治安管理处罚法》的相关规定，可能会受到五日以下拘留或五百元以下罚款的处罚；情节较重的，还可能面临五日以上十日以下拘留，并可并处五百元以下罚款。例如，在公共场所大声辱骂他人，引起多人围观，就可能构成此类违法行为。

2. 构成民事侵权：

   • 如果辱骂行为侵害了对方的名誉权，使其社会评价降低，那么这就构成了民事侵权。根据《中华人民共和国民法典》的规定，被侵权人有权要求侵权人承担停止侵害、恢复名誉、消除影响、赔礼道歉以及赔偿损失等民事责任。例如，通过社交媒体发布辱骂性言论，导致对方名誉受损，就可能构成民事侵权。

三、涉嫌犯罪的情况

• 若辱骂行为情节恶劣，达到一定程度，可能涉嫌侮辱罪。根据《中华人民共和国刑法》的相关规定，以暴力或其他方法公然侮辱他人，情节严重的，可能面临三年以下有期徒刑、拘役、管制或剥夺政治权利的刑罚。需要注意的是，这类犯罪通常需要被害人告诉才处理，但严重危害社会秩序和国家利益的除外。例如，多次在公共场所公然辱骂他人，且手段恶劣，就可能构成侮辱罪。

总结与建议

综上所述，当面对他人的辱骂时，我们应尽量避免以骂还骂的方式回应，因为这可能给自己带来不必要的法律风险。相反，我们应保持冷静，通过合法、合理的方式解决问题。例如，可以寻求法律援助，了解自己的权益和可能的救济途径；或者报警，让警方介入处理；也可以采取其他适当的民事救济措施，如要求对方赔礼道歉、赔偿损失等。这样不仅能有效维护自己的权益，还能避免不必要的法律纠纷和损失。

如有任何法律问题，可以直接向我咨询。我将根据你的具体情况，提供专业的法律建议和帮助。