结论：别人诬告您与他是情人关系，这种行为可能构成侵权，具体是否违法需根据行为的具体情节和造成的后果来判断。

分析如下：

1. 名誉权侵权角度：

   • 根据《中华人民共和国民法典》的相关规定，自然人享有名誉权，任何组织或者个人不得以侮辱、诽谤等方式侵害他人的名誉权。诬告您与他人是情人关系，若该诬告内容被公开传播，且足以导致您的社会评价降低，那么这种行为就可能构成对您名誉权的侵害。
   • 在这种情况下，您有权要求诬告者停止侵害、恢复名誉、消除影响、赔礼道歉，并可以要求赔偿因名誉权受到侵害而遭受的损失。

2. 诽谤罪角度：

   • 如果诬告者的行为情节严重，比如多次散布谣言、造成您严重精神损害或社会评价显著降低等，那么该行为可能构成诽谤罪。
   • 根据《中华人民共和国刑法》的规定，以暴力或者其他方法公然侮辱他人或者捏造事实诽谤他人，情节严重的，处三年以下有期徒刑、拘役、管制或者剥夺政治权利。但需要注意的是，诽谤罪一般属于自诉案件，即需要您自行向法院提起诉讼，除非严重危害社会秩序和国家利益。

3. 实际影响与后果：

   • 除了法律层面的判断，还需要考虑诬告行为对您的实际影响。比如，是否导致了您的工作、生活受到干扰，是否造成了您的精神损害等。这些实际影响也是判断行为是否违法以及违法程度的重要因素。

建议：

• 如果您遭遇了此类诬告，首先建议保持冷静，不要与诬告者发生直接冲突。
• 收集相关证据，如诬告的言论、传播范围、对您造成的影响等，以便在需要时提供证明。
• 可以考虑与诬告者进行沟通，要求其停止侵害并赔礼道歉。如果沟通无果，可以向相关部门投诉或寻求法律援助。
• 如果行为情节严重，构成了犯罪，您可以向公安机关报案，要求追究诬告者的刑事责任。

如有更多疑问或需要进一步的法律帮助，请直接向我咨询。