针对您提出的“不交罚金不给退保证金是否违法”的问题，这并非一个简单的“是”或“否”的答案，而是需要根据具体的合同内容、法律规定以及实际情况来综合判断。

首先，我们要明确保证金和罚金在法律上的性质。保证金通常作为一种担保方式，用于确保合同的履行或债务的偿还。而罚金则是对违约行为的一种惩罚性措施。

合法不退还保证金的情形：

1. 合同明确约定：如果双方在合同中明确约定了，在特定情况下（如违约）保证金不予退还，并且这种约定不违反法律法规的强制性规定，那么在支付保证金的一方出现违约行为并达到合同约定的不予退还条件时，收取保证金的一方有权不退还保证金。这是对违约方的一种惩罚，也是对守约方的合理补偿。

2. 法定不退还情形：在某些特定的法律场景中，如拍卖、招投标等，相关法律法规可能明确规定了保证金的退还条件和不予退还的情形。如果支付保证金的一方违反了这些规定，收取方有权依据法律规定不退还保证金。

违法不退还保证金的情形：

1. 合同无相关约定或约定无效：如果双方签订的合同中并未明确约定保证金不予退还的具体情形，或者虽然有所约定但约定内容违反法律法规的强制性规定（如格式合同中的不公平条款），则在不存在其他合法扣除保证金理由的情况下，收取保证金的一方拒绝退还保证金将构成违约。

2. 法定退还情形未履行：如果法律明确规定了保证金的退还条件和程序，而收取保证金的一方未按照法律规定执行，如旅游合同结束后无违约行为应退还保证金而未退还，则属于违法行为。

3. 以罚金为条件不退还保证金：如果收取保证金的一方以支付罚金为条件来拒绝退还保证金，且这种做法没有合同依据或法律依据，那么这种行为很可能是违法的。因为罚金和保证金是两种不同的法律概念，不能混为一谈。

建议：

• 在签订合同时，双方应明确约定保证金的退还条件和不予退还的情形，并确保这些约定符合法律法规的强制性规定。
• 在合同履行过程中，双方应严格遵守合同约定和法律规定，确保自身权益不受损害。
• 如果发生保证金纠纷，双方应首先尝试通过协商解决。如果协商不成，可以考虑向相关部门投诉或依法向人民法院提起诉讼。

综上所述，不交罚金不给退保证金是否违法，需要根据具体情况来判断。在实际操作中，建议双方保持沟通，明确各自的权利和义务，以避免不必要的法律纠纷。