结论：别人先骂你，你再骂回去，这一行为是否犯法，取决于辱骂的严重程度、造成的后果以及双方的具体行为表现。一般情况下，这可能属于民事侵权行为，但若情节严重，则可能触犯《治安管理处罚法》甚至刑法。下面我将从多个角度为你详细分析：

一、民事角度

从民事法律层面看，回骂行为若导致对方社会评价降低，即构成了对他人名誉权的侵害。名誉权是公民或法人保持并维护自己名誉的权利，是人格权的一种。被侵害人有权要求侵权人停止侵害、消除影响、赔礼道歉，并可以依法要求赔偿损失。这意味着，即使你是因为对方先骂而回应，只要你的回骂行为造成了对方名誉受损，你仍需承担相应的民事责任。例如，如果回骂内容涉及侮辱、诽谤等，且被他人知晓，导致对方在社交圈中的声誉受损，那么就可能构成名誉权侵权。

二、治安管理角度

若双方的对骂行为扰乱了公共秩序或造成了不良社会影响，公安机关有权根据《治安管理处罚法》进行干预。具体来说，公然侮辱他人或者捏造事实诽谤他人的，将面临五日以下拘留或者五百元以下罚款的处罚；情节较重的，则可能被处以五日以上十日以下拘留，并可并处五百元以下罚款。这里的“公然”侮辱，指的是当众或使用能使多人听到或看到的方式对他人进行侮辱。比如，在公共场所、网络平台上进行对骂，且围观人数较多，就可能被视为扰乱公共秩序。

三、刑事角度

虽然一般的回骂行为不会触及刑事责任，但若辱骂内容极其恶劣，构成公然侮辱他人或者捏造事实诽谤他人且情节严重的，则可能触犯刑法中的侮辱罪或诽谤罪，需要承担刑事责任。根据《中华人民共和国刑法》的相关规定，以暴力或其他方法公然侮辱他人或捏造事实诽谤他人，情节严重的，可处三年以下有期徒刑、拘役、管制或剥夺政治权利。此外，如果因骂人引发了打架、斗殴等暴力事件，造成了他人的身体伤害，还可能涉及故意伤害罪等其他刑事责任的承担。

四、司法实践考量

在司法实践中，对于此类案件的处理会综合考虑具体情节、造成的后果以及双方的过错程度等因素。如果对方先挑衅且情节恶劣，而你的回骂情节相对较轻，法院或公安机关在责任认定上可能会给予一定的考量。但这并不意味着回骂行为就是完全正当合法不受任何约束的。相反，它仍然是一种不道德且可能违法的行为。

五、建议与总结

面对他人的辱骂，最明智的做法是保持冷静，避免情绪化的回应。尽量通过和平的方式解决矛盾，如沟通、协商或寻求第三方的调解。如果辱骂行为未造成严重后果，可通过沟通、调解或民事诉讼等方式解决；如果行为已触犯法律，应及时向公安机关报案或向法院提起诉讼以维护自己的合法权益。记住，和平解决矛盾才是正道，以骂还骂只会让矛盾升级，甚至可能让自己陷入法律纠纷。

如果你正面临类似的情况，或者有任何关于侵权损害（人格权）方面的疑问，都可以直接向我咨询，我会根据你的具体情况，为你提供专业的法律建议。