针对公职人员扰民、诬陷、诽谤的行为，您可以通过以下法律途径维护自身权益，具体分为民事、行政、刑事三个方向处理，我将结合实务经验为您详细说明：

一、民事侵权救济：要求停止侵害、赔礼道歉、赔偿损失

根据《民法典》第1024条、第1025条，公职人员若通过言语、文字等方式捏造事实诽谤您，或恶意诬陷您侵犯其名誉权，您有权：

1. 固定证据：保存录音、聊天记录、书面材料、证人证言等，证明对方存在诽谤/诬陷行为（如对方在公开场合散布不实信息，或通过单位内部渠道传播）；
2. 起诉要求赔偿：向法院提起民事诉讼，主张对方停止侵害、公开赔礼道歉，并赔偿因名誉受损导致的经济损失（如误工费、精神损害抚慰金等）。实务中，精神损害赔偿需结合侵权情节、影响范围等综合判定，一般需达到“严重后果”标准（如导致您社会评价显著降低、精神抑郁等）。

二、行政投诉：向纪检监察机关或上级单位举报

公职人员利用职务之便扰民、诬陷他人，可能违反《公务员法》第59条（禁止滥用职权、侵害公民合法权益）或《公职人员政务处分法》第39条（对诬告陷害行为的处分规定）：

1. 向纪检监察机关举报：携带证据（如录音、书面材料）向当地纪委监委实名举报，要求对涉事公职人员立案调查；
2. 向其上级单位投诉：若对方行为与其职务相关（如利用单位权力打压您），可向其所在单位或上级主管部门反映，要求依规处理（如警告、记过、撤职等）。

三、刑事控告：追究诬告陷害罪或诽谤罪刑事责任

若对方行为情节严重，可能构成犯罪：

1. 诬告陷害罪（《刑法》第243条）：若对方捏造事实诬告您犯罪，意图使您受刑事追究，且情节严重（如导致您被刑事立案、拘留等），您可向公安机关报案，要求追究其刑事责任（处3年以下有期徒刑、拘役或管制）；
2. 诽谤罪（《刑法》第246条）：若对方通过信息网络（如微信、微博）散布不实信息，情节严重（如点击量超5000次、转发超500次，或造成您精神失常、自杀等后果），您可向法院提起刑事自诉，要求对方承担刑事责任（处3年以下有期徒刑、拘役、管制或剥夺政治权利）。

实务建议：优先固定证据，分情况选择救济途径

1. 若对方行为较轻（如私下辱骂、散布小范围不实信息）：优先通过民事诉讼或行政投诉解决，成本较低且效率较高；
2. 若对方行为严重（如利用职务打压、网络大规模造谣）：建议同步向纪检监察机关举报和刑事控告，形成压力迫使对方停止侵害。

最后提醒：处理此类纠纷时，务必保持冷静，避免与对方发生直接冲突，所有沟通尽量通过书面或可留痕的方式进行（如短信、邮件），为后续维权保留证据。若您需要进一步分析证据或制定具体方案，可以直接向我咨询，我会结合您的具体情况提供详细建议。