若想以侵犯名誉权为由起诉举报人，需根据不同情况判断可行性：

1. 若举报内容属实
   若举报人掌握的婚外情证据真实（如聊天记录、照片、视频等），且举报方式未超出必要限度（如未公开传播、未恶意诋毁），则举报行为通常不构成侵权。此时起诉举报人可能面临败诉风险，因为法律保护公民对违法行为的检举权利。

2. 若举报内容失实或手段违法

   • 内容失实：若举报人故意捏造事实（如伪造证据、虚构情节），导致您社会评价降低，可主张其侵犯名誉权，要求停止侵害、赔礼道歉并赔偿损失。
     
   • 手段违法：若举报人通过非法手段获取证据（如窃听、偷拍隐私部位），即使内容属实，也可能因证据合法性存疑而构成侵权。此时可同时主张其侵犯隐私权。

起诉前的关键步骤：

1. 固定证据：保存举报材料（如书面举报信、网络帖子）、传播记录（如转发截图）、对您造成影响的证明（如单位处分通知、亲友询问记录）。
   
2. 委托鉴定：若涉及伪造证据，需通过技术鉴定证明内容不实。
   
3. 咨询律师：结合证据情况，评估侵权构成要件（如行为违法性、主观过错、损害后果、因果关系）。

诉讼策略建议：

• 优先通过律师函警告，要求停止侵害并消除影响，避免诉讼成本。
  
• 若协商无果，可向法院提起名誉权纠纷之诉，同时申请行为保全（如要求删除网络内容）。
  
• 注意诉讼时效为3年，自知道权利受损之日起计算。

需警惕的风险：
若您本身存在婚外情行为，对方举报可能涉及道德争议，法院在判决时会综合考量社会公序良俗。建议优先通过合法途径解决婚姻问题，而非单纯追究举报责任。

如有进一步证据或细节需要分析，可直接向我说明具体情况。