结论：招标人不归还违规投标人的保证金是否违法，需根据具体情况判断。若招标文件或相关法律法规明确规定违规情形下保证金的处理方式，且招标人未按规定处理，则可能违法；反之，若招标文件有合法合理规定且招标人依规处理，则可能不违法。

分析：

1. 保证金的作用与性质：

   • 投标保证金是投标人按照招标文件要求向招标人出具的，以一定金额表示的投标责任担保。其目的是确保投标人在投标过程中遵守招标文件的规定，并在中标后按照合同约定履行义务。
   • 保证金通常具有担保性质，若投标人违规，招标人有权根据招标文件的规定处理保证金。

2. 违规情形下的保证金处理：

   • 招标文件规定：招标文件通常会明确规定在投标人违规（如串标、围标、弄虚作假等）时，招标人有权没收或扣除保证金。若招标文件中有此类规定，且投标人确实违规，招标人不归还保证金可能是合法的。
   • 法律法规依据：除了招标文件的规定，还需考虑相关法律法规对保证金处理的规定。例如，《中华人民共和国招标投标法》及其实施条例中，可能有关于保证金处理的具体条款。若法律法规明确规定在特定违规情形下招标人有权不归还保证金，则招标人的行为可能是合法的。

3. 招标人行为的合法性判断：

   • 合规性审查：首先，需要审查招标文件是否合法合规，特别是关于保证金处理的规定是否违反了法律法规的强制性规定。
   • 违规事实认定：其次，需要认定投标人是否存在违规行为，以及该行为是否属于招标文件或法律法规规定的可以没收或扣除保证金的情形。
   • 处理程序审查：最后，还需要审查招标人在处理保证金时是否遵循了正当程序，如是否给予了投标人陈述、申辩的机会，是否依法进行了公示或通知等。

4. 可能存在的例外情况：

   • 招标文件未规定或规定不明确：如果招标文件未对违规情形下保证金的处理作出规定，或者规定不明确，招标人可能无法直接依据招标文件不归还保证金。此时，需参考相关法律法规或行业惯例进行判断。
   • 法律法规变更或特殊规定：在某些特殊情况下，法律法规可能发生变更，或者存在针对特定行业、地区的特殊规定。这些变更或特殊规定可能影响保证金的处理方式。

建议：

• 对于投标人而言，若认为招标人不归还保证金的行为违法，可以首先审查招标文件和相关法律法规，确认自己的违规行为是否属于可以没收或扣除保证金的情形。若认为招标人的行为违法，可以通过法律途径维护自己的权益，如向招标人提出异议、向相关部门投诉或提起诉讼等。
• 对于招标人而言，在处理违规投标人的保证金时，应确保招标文件的规定合法合规，且严格遵循正当程序。同时，应密切关注相关法律法规的变更和特殊规定，以确保自己的行为符合法律要求。

后续行动：

• 若您在此问题上有进一步的疑问或需要具体的法律帮助，请直接向我咨询。我将根据您的具体情况提供详细的法律分析和建议。