结论：在此情况下，你可能需要承担一定的赔偿责任，但具体责任大小需根据实际情况判断，包括对方辱骂的严重性、你打耳光造成的后果等。同时，对方辱骂你的行为也可能构成侵权，你可以要求其承担相应的责任。
分析说明：
你的行为可能构成侵权：
- 你因对方辱骂而打了他一耳光，这一行为可能构成对对方身体权的侵害。根据《中华人民共和国民法典》的相关规定，侵害他人身体权的，应当承担侵权责任。
- 侵权责任的大小通常根据侵权行为的性质、情节、后果以及侵权人的过错程度等因素来确定。因此，你需要根据实际情况判断自己应承担的责任大小。
对方辱骂你的行为也可能构成侵权：
- 对方辱骂你“神经病”，这一行为可能构成对你名誉权的侵害。名誉权是公民或法人保持并维护自己名誉的权利，任何组织或者个人不得以侮辱、诽谤等方式侵害他人的名誉权。
- 如果对方辱骂你的行为确实构成了对你名誉权的侵害，你可以要求其承担相应的侵权责任，如赔礼道歉、消除影响、恢复名誉等。
双方责任的划分：
- 在此类纠纷中，通常会考虑双方的行为性质、情节以及过错程度等因素来划分责任。如果对方辱骂你的行为较为严重，而你打耳光的行为相对较轻，那么对方可能需要承担更大的责任。
- 反之，如果你打耳光的行为造成了对方较为严重的后果（如受伤、精神损害等），那么你可能需要承担更大的责任。
法律建议：
收集证据：
- 在处理此类纠纷时，收集证据至关重要。你可以收集对方辱骂你的证据（如录音、录像、证人证言等）以及你打耳光后对方受伤或精神损害的证据（如医疗记录、照片、视频等）。
协商解决：
- 在收集到足够证据后，你可以尝试与对方进行协商解决。通过沟通，双方可以达成和解协议，明确各自的责任和赔偿方式。
寻求法律帮助：
- 如果协商无果或对方拒绝承担责任，你可以寻求法律帮助。你可以向我咨询具体的法律程序和维权策略，或者向当地法院提起诉讼以维护自己的合法权益。
后续行动指南：
- 在处理此类纠纷时，请保持冷静和理性，避免采取过激行为导致纠纷升级。
- 及时收集并保存相关证据，以便在需要时提供证明。
- 如果对方的行为确实构成了侵权，你可以要求其承担相应的责任；同时，你也需要对自己的行为负责，并承担可能产生的法律后果。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。