遇到被别人招摇诽谤污蔑与他人有不正当关系的情况，你可以采取以下措施来维护自己的权益：
保留证据：
- 首先，务必保留所有与诽谤污蔑相关的证据。这包括文字、语音、视频、图片或任何能够证明诽谤行为的材料。这些证据是后续维权的基础，也是警方或法院处理案件的重要依据。
要求侵权人停止侵害：
- 你可以直接找到侵权人，要求其停止诽谤污蔑行为，并消除已经造成的影响。如果对方同意并采取措施，那么问题可能就此解决。
向法院提起民事诉讼：
- 如果侵权人拒绝停止侵害，你可以向法院提起民事诉讼，要求其承担侵权责任。在诉讼中，你可以要求对方停止侵害、恢复名誉、消除影响，并赔偿因此造成的精神损失和其他损失。
报警处理：
- 如果诽谤污蔑行为严重，构成刑事犯罪，你可以向当地的警方报案。警方会根据相关法律规定进行调查处理，如果认为有犯罪事实需要追究刑事责任，将立案并展开进一步的侦查工作。
法律依据：
- 根据《中华人民共和国刑法》第二百四十六条的规定，以暴力或者其他方法公然侮辱他人或者捏造事实诽谤他人，情节严重的，处三年以下有期徒刑、拘役、管制或者剥夺政治权利。这意味着，如果诽谤行为严重到构成犯罪，侵权人将面临刑事处罚。
- 同时，根据《中华人民共和国民法典》的相关规定，民事主体享有名誉权。任何组织或者个人不得以侮辱、诽谤等方式侵害他人的名誉权。名誉是对民事主体的品德、声望、才能、信用等的社会评价，受到法律的保护。
综上所述，面对被别人招摇诽谤污蔑与他人有不正当关系的情况，你应该积极采取措施来维护自己的权益。保留证据、要求侵权人停止侵害、向法院提起民事诉讼或报警处理都是有效的途径。同时，你也可以咨询专业律师（如我）以获取更具体的法律建议和支持。