结论：男人威胁情人退回自己送出的礼物和钱财是否违法，需根据具体情况判断，一般可能涉及违法，甚至可能构成犯罪。
分析如下：
威胁行为的违法性：
- 如果男人采用威胁、恐吓等手段，迫使情人退回礼物和钱财，这种行为可能违反了《中华人民共和国治安管理处罚法》的相关规定。根据该法，写恐吓信或者以其他方法威胁他人人身安全的，或者公然侮辱他人或者捏造事实诽谤他人的，都可能受到行政处罚，如拘留或罚款。
- 若威胁行为更为严重，如涉及暴力、非法拘禁等，则可能触犯《中华人民共和国刑法》，构成犯罪，如敲诈勒索罪、非法拘禁罪等。
礼物和钱财的性质：
- 如果男人送出的礼物和钱财属于赠与性质，且赠与行为已经完成，那么情人通常没有法律义务退回这些财物。赠与合同一旦成立并生效，除非存在法定撤销事由（如受赠人严重侵害赠与人或者赠与人近亲属的合法权益等），否则赠与人不得随意撤销赠与。
- 如果男人送出的财物是以结婚为目的的附条件赠与（如彩礼），且双方最终未结婚，那么在某些情况下，男人可能有权要求情人退回这些财物。但这并不意味着男人可以通过威胁手段来达到目的。
法律建议：
- 对于男人而言，如果希望情人退回财物，应当通过合法途径解决，如协商、调解或诉讼等。威胁、恐吓等非法手段不仅无法解决问题，还可能使自己陷入法律困境。
- 对于情人而言，如果面临男人的威胁行为，应当保持冷静，及时收集证据（如录音、录像、聊天记录等），并向公安机关报案或寻求法律援助。同时，也可以考虑通过法律途径维护自己的合法权益，如起诉男人侵犯自己的人格权等。
可能后果：
- 如果男人的威胁行为被认定为违法或犯罪，他可能面临行政处罚或刑事处罚，如拘留、罚款、有期徒刑等。
- 如果情人因男人的威胁行为而遭受了精神损害或其他损失，她有权要求男人承担相应的民事赔偿责任。
总结：男人威胁情人退回自己送出的礼物和钱财是一种不理智且可能违法的行为。在处理此类问题时，双方都应当保持冷静和理性，通过合法途径解决争议。如果有任何法律问题或需要进一步的法律建议，可以直接向我咨询。