面对邻居辱骂您残疾听力的情况，您有权采取法律手段维护自身尊严和权益，具体可从以下角度处理：

1. 固定证据是维权的基础
   根据《民法典》第1024条，民事主体享有名誉权，任何组织或个人不得以侮辱、诽谤等方式侵害他人名誉权。您需优先收集邻居辱骂的证据，例如：

   • 录音/录像：若辱骂发生在公开场合或您能合法录制（如自家门口安装摄像头），需确保录音清晰、录像完整，能明确显示对方身份及辱骂内容；
     
   • 证人证言：邀请在场邻居或物业工作人员作为证人，出具书面证言或出庭作证；
     
   • 书面记录：若辱骂通过短信、微信等文字形式发生，需保存原始聊天记录，避免截图丢失元数据。
     

2. 优先通过协商或第三方调解解决

   • 社区/物业介入：联系居委会、村委会或物业管理人员，要求其协助调解，明确告知对方其行为已涉嫌违法，要求停止侵害并道歉；
     
   • 警方调解：若辱骂情节较轻（如单次发生、未造成严重后果），可拨打110报警，警方会依据《治安管理处罚法》第42条进行调解，对辱骂者处以警告或罚款（通常5日以下拘留或500元以下罚款）。
     

3. 法律诉讼是终极保障
   若协商、调解无果，或辱骂行为持续、情节严重（如多次辱骂、造成您社会评价降低、精神损害等），可向法院提起名誉权侵权诉讼，要求对方：

   • 停止侵害：立即停止辱骂行为；
     
   • 赔礼道歉：通过书面或公开方式向您道歉；
     
   • 赔偿损失：包括精神损害抚慰金（需提供医疗证明等证据）及因维权产生的合理费用（如律师费、公证费）。
     

特别提醒：若邻居的辱骂行为伴随推搡、殴打等肢体冲突，可能涉嫌《刑法》第246条“侮辱罪”或第234条“故意伤害罪”，需立即报警并保留伤情鉴定证据，此时案件可能升级为刑事案件，对方可能面临刑事处罚。

行动建议：先尝试通过社区或警方调解解决，若无效再考虑诉讼；同时注意保持冷静，避免与对方发生直接冲突，防止事态扩大。如有进一步疑问，可直接向我咨询具体操作细节。