在此情境中，动手打人者需承担主要责任，而辱骂行为虽不道德但一般不直接导致法律责任，除非构成侮辱罪等特定情形。以下是对此问题的详细分析：
一、动手打人者的责任
行政责任：
- 根据《中华人民共和国治安管理处罚法》第四十三条，殴打他人或故意伤害他人身体的，会被处以拘留和罚款。具体处罚取决于打架的性质、情节以及造成的后果。如果打人行为情节较轻，可能只会受到较短的拘留或者罚款；但如果造成的伤害较重，甚至构成犯罪，那么可能会被刑事拘留，并面临更严重的法律后果。
民事责任：
- 动手打人者还需承担民事赔偿责任，包括赔偿受害者的医疗费、误工费、精神损害赔偿等。
二、辱骂者的责任
民事责任：
- 辱骂他人可能构成对他人名誉权、人格尊严权的侵犯，被辱骂者有权要求辱骂者停止侵权行为，并承担相应的民事赔偿责任，如精神损害赔偿等。
刑事责任（特定情形）：
- 在刑事方面，辱骂他人可能构成侮辱罪。依据《中华人民共和国刑法》第二百四十六条，以暴力或者其他方法公然侮辱他人或者捏造事实诽谤他人，情节严重的，处三年以下有期徒刑、拘役、管制或者剥夺政治权利。但需要注意的是，此罪为告诉才处理，即需要被辱骂者自行向法院提起诉讼，除非严重危害社会秩序和国家利益。
三、特殊情况考虑
辱骂与打人的关联性：虽然辱骂行为本身不直接导致法律责任（除非构成侮辱罪），但如果辱骂行为是打人行为的诱因或组成部分，且打人行为造成了严重后果，那么辱骂者也可能在一定程度上被视为共同侵权人，需承担相应的法律责任。不过，在此案例中，由于您未还手，辱骂行为与打人行为在时间上和因果关系上相对独立，因此辱骂者主要承担的是民事上的名誉权侵权责任。
自卫与防卫过当：如果您在被打时进行了合理的自卫，且未超过必要限度，那么您的行为可能构成正当防卫，无需承担法律责任。但在此案例中，由于您明确表示未还手，因此不涉及自卫与防卫过当的问题。
四、建议与行动
- 及时报警：无论辱骂还是打人行为，都应及时向警方报案，以便警方能够迅速开展调查，保护您的合法权益。
- 收集证据：尽可能收集与辱骂和打人行为相关的证据，如现场监控录像、目击者证言、医疗记录等，以便在后续的法律程序中证明自己的权益。
- 寻求法律帮助：如果您在处理此事过程中遇到任何法律问题或困惑，可以直接向我咨询，我会根据您的具体情况提供专业的法律建议和帮助。
综上所述，动手打人者需承担主要责任，而辱骂者则可能承担民事上的名誉权侵权责任。在处理此类事件时，请务必保持冷静和理性，及时报警并收集证据以维护自己的合法权益。