辱骂残疾人的行为是违法的，可能承担民事、行政及刑事责任。以下从不同法律层面为您详细分析：

民事层面

1. 侵害名誉权
   根据《中华人民共和国民法典》第一千零二十四条，民事主体享有名誉权，任何组织或个人不得以侮辱、诽谤等方式侵害他人的名誉权。若辱骂行为导致残疾人社会评价降低（如公开场合辱骂、散布侮辱性言论），残疾人或其法定代理人有权要求侵权人：

   • 停止侵害（如删除网络辱骂内容）；
     
   • 恢复名誉、消除影响（如公开赔礼道歉）；
     
   • 赔偿精神损害抚慰金（具体金额需结合辱骂方式、持续时间、后果等综合认定）。

2. 侵害一般人格权
   《民法典》第九百九十条规定，自然人享有基于人身自由、人格尊严产生的其他人格权益。若辱骂行为未直接指向名誉权，但严重伤害残疾人的人格尊严（如使用歧视性语言攻击其残疾身份），可认定为对一般人格权的侵害，同样需承担民事责任。

行政层面

• 违反治安管理处罚法
  根据《中华人民共和国治安管理处罚法》第四十二条，公然侮辱他人的，处五日以下拘留或五百元以下罚款；情节较重的（如多次辱骂、当众辱骂、辱骂导致残疾人精神受损），处五日以上十日以下拘留，可并处五百元以下罚款。
  特殊保护：残疾人作为弱势群体，法律对其人格尊严的保护力度更强，辱骂行为往往被视为情节较重。

刑事层面

1. 侮辱罪
   《中华人民共和国刑法》第二百四十六条规定，以暴力或其他方法公然侮辱他人，情节严重的，处三年以下有期徒刑、拘役、管制或剥夺政治权利。
   构成要件：

   • 长期、持续辱骂残疾人（如通过短信、社交媒体反复辱骂）；
     
   • 辱骂行为导致严重后果（如残疾人精神失常、自杀未遂等）。
     注意：侮辱罪需被害人自行向法院提起刑事自诉（严重危害社会秩序和国家利益的除外）。

2. 寻衅滋事罪
   《刑法》第二百九十三条规定，追逐、拦截、辱骂、恐吓他人，情节恶劣的，处五年以下有期徒刑、拘役或者管制。
   适用情形：若辱骂行为破坏社会秩序（如在公共场所辱骂残疾人引发围观、冲突），且情节恶劣（如辱骂内容极端恶劣、造成公共场所秩序混乱），可能构成此罪。

法律建议

1. 保留证据：若遭遇辱骂，应立即保存录音、录像、聊天记录等证据，以便后续维权。
   
2. 及时维权：
   
   • 民事层面：可向法院起诉，要求侵权人承担民事责任；
     
   • 行政层面：向公安机关报案，要求对辱骂者进行治安处罚；
     
   • 刑事层面：若辱骂行为涉嫌犯罪，可向法院提起刑事自诉。
     
3. 社会支持：残疾人或其家属可联系当地残联、法律援助中心等机构，获取法律帮助和心理支持。

总结：辱骂残疾人不仅违背社会公德，更可能触犯法律。法律对残疾人的保护力度较强，辱骂者可能面临民事赔偿、行政处罚甚至刑事追责。建议公众尊重残疾人的人格尊严，避免任何形式的歧视和辱骂。若您或身边人遭遇此类情况，可直接向我咨询具体维权方案。