结论：当对方骂人时，“打回去”这一行为是否合法，需根据具体情况判断。一般情况下，以暴力回应辱骂可能构成违法行为甚至犯罪，不建议采取此种方式。

详细分析：

1. 一般情况下的法律后果：

   • 在日常生活中，面对他人的辱骂，若选择以暴力“打回去”，这一行为很可能违反《中华人民共和国治安管理处罚法》。根据该法，殴打他人或故意伤害他人身体的，可能会受到五日以上十日以下拘留，并处二百元以上五百元以下罚款；情节较轻的，也可能面临五日以下拘留或者五百元以下罚款。因此，以暴力回应辱骂，不仅不能有效解决问题，反而可能使自己陷入法律纠纷。

2. 可能构成犯罪的情况：

   • 若“打回去”的行为情节严重，如造成对方轻伤或重伤，那么可能构成故意伤害罪。根据《中华人民共和国刑法》的相关规定，故意伤害他人身体的，处三年以下有期徒刑、拘役或者管制；致人重伤的，处三年以上十年以下有期徒刑；致人死亡或者以特别残忍手段致人重伤造成严重残疾的，处十年以上有期徒刑、无期徒刑或者死刑。因此，以暴力回应辱骂，在极端情况下，可能面临严重的刑事处罚。

3. 合法合理的应对方式：

   • 面对他人的辱骂，我们应保持冷静，通过合法、合理的方式解决问题。例如，可以寻求法律援助，向公安机关报案，或者采取其他适当的民事救济措施。这些方式不仅能有效维护自己的权益，还能避免不必要的法律纠纷和损失。

总结与建议：

• 当面对他人的辱骂时，我们应尽量避免以暴力回应。暴力不仅不能解决问题，反而可能使自己陷入法律困境。
• 建议保持冷静，通过合法途径维护自己的权益。如对方辱骂行为严重，可向公安机关报案或寻求法律援助。
• 若因辱骂行为导致名誉权受损，还可依据《中华人民共和国民法典》的规定，要求侵权人承担停止侵害、恢复名誉、消除影响、赔礼道歉以及赔偿损失等民事责任。

如有任何法律疑问或需要进一步的法律帮助，请直接向我咨询，我将竭诚为你提供专业的法律服务。