结论：无论对方是否骂人，您先动手打人且打到了对方（即使未造成实际伤害）的行为，都可能构成违法，并需承担相应的法律责任。
详细分析：
法律性质：
- 骂人：虽然骂人可能侵犯了他人的名誉权，但这主要属于民事纠纷范畴，通常通过道歉、赔偿等方式解决。然而，这并不意味着骂人行为可以被容忍或忽视，尤其是在它引发了后续冲突的情况下。
- 打人：动手打人则明确构成了对他人身体权的侵犯，无论是否造成实际伤害，都可能触犯法律。根据《中华人民共和国治安管理处罚法》的相关规定，殴打他人或故意伤害他人身体的行为，将面临行政处罚。
可能的法律后果：
- 行政处罚：根据《中华人民共和国治安管理处罚法》第四十三条，殴打他人的，或者故意伤害他人身体的，处五日以上十日以下拘留，并处二百元以上五百元以下罚款；情节较轻的，处五日以下拘留或者五百元以下罚款。即使对方未受伤，您的行为也已扰乱了社会治安秩序，公安机关有权根据具体情节作出相应处罚。
- 民事赔偿：除了行政处罚外，您还可能因侵犯对方身体权而承担民事赔偿责任。这包括赔偿对方因您的行为而产生的医疗费、误工费等合理费用，以及可能的赔礼道歉等精神损害赔偿。
合法维权途径：
- 保持冷静：面对他人的辱骂，首先应当保持冷静和理智，避免冲动行为。
- 沟通解决：可以尝试与对方进行沟通，要求其停止不当行为，并寻求双方都能接受的解决方案。
- 寻求帮助：如果沟通无果，可以寻求相关部门（如公安机关、调解机构）的帮助。他们可以介入调解，制止侵权行为，并依法对侵权者进行处理。
- 法律途径：如果情况严重，且对方的行为构成了对您名誉权或其他合法权益的侵犯，您还可以考虑通过法律途径来维护自己的权益，如提起民事诉讼等。
建议：
- 避免冲动行为：无论在任何情况下，动手打人都是不可取的行为。它不仅可能让您面临法律处罚和民事赔偿责任，还可能对您的个人形象和声誉造成负面影响。
- 尊重他人权利：我们应该尊重他人的权利和尊严，遵守法律法规，以和平、理性的方式解决争端和问题。
- 及时咨询：如果您在处理此类纠纷时感到困惑或无助，建议及时向我咨询。我可以根据您的具体情况提供专业的法律建议和帮助。
总之，面对他人的辱骂和挑衅，我们应该保持冷静和理智，通过合法途径来维护自己的权益。冲动和暴力只会让问题变得更加复杂和难以解决。