结论：在此情况下，你方可能会面临行政处罚，如果对方伤势较重，还可能涉及刑事责任，同时对方也有权要求你方进行民事赔偿。具体处理方式会根据对方伤势情况、事件的具体情节以及双方的态度等因素综合考量。
分析说明：
行政处罚：
- 根据《中华人民共和国治安管理处罚法》的相关规定，殴打他人的，或者故意伤害他人身体的，处五日以上十日以下拘留，并处二百元以上五百元以下罚款；情节较轻的，处五日以下拘留或者五百元以下罚款。
- 在此情况下，由于是你方先动手打人，即使对方先辱骂，你方也可能因殴打他人而受到行政处罚。
刑事责任：
- 如果对方伤势较重，构成轻伤或以上，你方可能涉嫌故意伤害罪。根据《中华人民共和国刑法》的相关规定，故意伤害他人身体的，处三年以下有期徒刑、拘役或者管制。
- 刑事责任的承担将取决于对方伤势的鉴定结果以及事件的具体情节。
民事赔偿：
- 无论是否受到行政处罚或刑事责任追究，你方都需要对对方的损失进行民事赔偿。这包括医疗费、护理费、交通费等为治疗和康复支出的合理费用，以及因误工减少的收入。
- 民事赔偿的金额将根据对方的实际损失和双方的过错程度来确定。
后续行动建议：
- 积极配合调查：如果警方介入调查，你方应积极配合，如实陈述事情经过，不要隐瞒或歪曲事实。
- 寻求和解：在可能的情况下，你方可以尝试与对方进行和解，通过协商达成赔偿协议，以减轻可能的法律后果。
- 咨询专业律师：由于此类事件涉及法律责任和赔偿问题，建议你方咨询专业律师，以便更好地了解自己的权利和义务，以及如何应对可能的法律后果。不过，既然你已经在向我咨询，我会尽我所能为你提供法律帮助。
特殊场景提醒：
- 如果对方辱骂行为特别恶劣，且你方动手打人是在情绪极度激动下发生的，你方可以在接受处罚时向警方说明情况，但这并不构成免责理由，只是可能在量刑或处罚时作为考虑因素。
- 如果对方存在过错（如先辱骂），在民事赔偿方面，法院可能会根据双方的过错程度来划分责任比例，从而减轻你方的赔偿责任。但这并不意味着你方可以完全免责。
行动清单：
- 保留好所有与事件相关的证据，如现场照片、视频、证人证言等。
- 如果对方提出赔偿要求，不要轻易答应或拒绝，先咨询专业律师的意见。
- 积极配合警方的调查工作，如实陈述事情经过。
如有其他疑问或需要进一步的法律帮助，请直接向我咨询。