核心结论：对于智力残疾者辱骂他人后被打的情况，需分情况讨论责任划分与处理方式，具体如下：

1. 打人者的法律责任

• 一般原则：无论被打者是否为智力残疾者，打人行为均可能构成违法甚至犯罪。根据《治安管理处罚法》第43条，殴打他人或故意伤害他人身体的，可处5-10日拘留并罚款；情节较轻的，处5日以下拘留或罚款。若造成轻伤以上后果，则可能构成《刑法》第234条的故意伤害罪，面临3年以下有期徒刑、拘役或管制。
• 特殊情形：若打人者因被辱骂而情绪激动实施反击，可能涉及“防卫过当”问题。根据《刑法》第20条，正当防卫需满足“不法侵害正在进行、针对侵害者本人、不超过必要限度”等条件。若防卫行为明显超过必要限度（如对方仅辱骂未动手，却遭严重殴打），则需承担刑事责任，但可减轻或免除处罚。

2. 智力残疾者的法律地位与责任

• 民事行为能力：根据《民法典》第21-22条，智力残疾者若不能辨认或完全辨认自己行为，属于无/限制民事行为能力人。其辱骂行为若因精神障碍导致，可能不承担民事侵权责任，但监护人需承担监护职责（如制止辱骂、赔偿损失等）。
• 行政/刑事责任：若智力残疾者具备部分辨认能力，且辱骂行为情节严重（如公然侮辱他人），可能违反《治安管理处罚法》第42条，面临警告、罚款或拘留处罚。但若经鉴定属于“不能控制自己行为”的精神病人，则不予处罚，责令监护人严加看管和治疗。

3. 处理建议

• 对打人者：
  1. 立即停止侵害行为，避免矛盾升级；
  2. 主动配合调查，如实陈述事实；
  3. 若认为属于正当防卫，需提供证据（如现场监控、证人证言）证明防卫必要性；
  4. 积极赔偿对方损失（如医疗费、误工费），争取谅解以减轻处罚。
• 对智力残疾者监护人：
  1. 加强监护，避免其再次实施辱骂等侵权行为；
  2. 若对方被打受伤，需承担民事赔偿责任（如医疗费、护理费）；
  3. 若打人者构成犯罪，可提起刑事附带民事诉讼要求赔偿。

4. 关键点总结

• 打人行为本身违法，需根据后果承担行政或刑事责任；
• 智力残疾者的法律责任需结合其辨认能力判断，监护人可能需代为担责；
• 双方可通过协商、调解或诉讼解决纠纷，建议优先通过基层组织（如居委会、派出所）介入调解。

提示：具体案件需结合证据（如伤情鉴定、监控录像、证人证言）和细节（如辱骂内容、打人方式）综合判断。若有进一步疑问，可直接向我咨询具体场景下的法律应对方案。