拒不归还抵押金是否违法，需根据具体情况来判断，不能一概而论。以下从不同角度为您详细分析：

一、抵押金的性质与约定

1. 合法约定下的抵押金：

   • 如果双方在合同中明确约定了抵押金的性质、金额、返还条件等，且该约定不违反法律、行政法规的强制性规定，那么抵押金就具有法律效力。
   • 在这种情况下，如果一方拒不按照约定归还抵押金，就构成了违约行为，另一方有权要求其承担违约责任，包括返还抵押金、支付违约金等。

2. 非法约定下的抵押金：

   • 如果抵押金的约定违反了法律、行政法规的强制性规定，或者以合法形式掩盖非法目的，那么该约定就是无效的。
   • 例如，如果抵押金被用作非法活动的担保，或者抵押金的金额过高、返还条件苛刻等，都可能构成非法约定。在这种情况下，拒不归还抵押金可能不构成违约，但可能涉及其他法律责任，如非法所得的追缴等。

二、抵押金的返还条件

1. 约定返还条件成就：

   • 如果合同中明确约定了抵押金的返还条件，且该条件已经成就，那么一方就有权要求另一方返还抵押金。
   • 如果另一方拒不返还，就构成了违约行为，需要承担相应的法律责任。

2. 约定返还条件未成就或未约定：

   • 如果合同中未约定抵押金的返还条件，或者约定的条件尚未成就，那么一方要求另一方返还抵押金就可能缺乏法律依据。
   • 在这种情况下，拒不归还抵押金可能不构成违法，但双方可以通过协商、调解等方式解决争议。

三、法律后果与救济途径

1. 违约责任：

   • 如果拒不归还抵押金构成违约行为，那么违约方需要承担违约责任，包括返还抵押金、支付违约金等。
   • 受损方有权要求违约方按照合同约定履行义务，或者通过诉讼、仲裁等方式维护自己的合法权益。

2. 其他法律责任：

   • 如果拒不归还抵押金的行为涉及其他违法行为，如非法占有、诈骗等，那么行为人可能需要承担刑事责任或行政责任。
   • 在这种情况下，受损方可以向公安机关报案，或者向相关行政部门投诉举报。

四、建议与提醒

• 明确约定：在签订合同时，双方应明确约定抵押金的性质、金额、返还条件等，以避免后续争议。
• 依法维权：如果一方拒不归还抵押金，另一方应依法维权，通过协商、调解、诉讼或仲裁等方式解决争议。
• 谨慎操作：在涉及抵押金的问题上，双方应谨慎操作，确保自己的行为符合法律法规的规定，避免不必要的法律风险。

如果您在抵押金方面遇到任何法律问题或困惑，可以直接向我咨询。我会根据您的具体情况，为您提供专业、全面的法律建议。