出租车司机退车时，扣押金是否合法需视具体情况而定，不能一概而论。以下从不同角度为您详细分析：

一、合同约定优先

1. 合同中有明确约定：如果出租车司机与出租车公司或车主在签订租赁合同时，明确约定了退车时押金的处理方式，包括是否扣除、扣除的条件和金额等，那么双方应严格按照合同约定执行。若合同中明确规定了退车时扣除押金的情形，且司机在租赁期间存在违约行为，那么扣除押金是合法的。

2. 合同中无明确约定：如果合同中没有明确约定退车时押金的处理方式，那么出租车公司或车主不能随意扣除押金。此时，扣除押金的行为可能构成违约，司机有权要求返还押金。

二、违约行为的认定

1. 司机存在违约行为：如果司机在租赁期间存在违约行为，如未按时支付租金、损坏车辆未修复、违反交通规则导致车辆被扣等，且这些违约行为给出租车公司或车主造成了实际损失，那么出租车公司或车主有权根据合同约定或法律规定扣除相应金额的押金作为赔偿。

2. 司机无违约行为：如果司机在租赁期间严格遵守合同约定，未出现任何违约行为，那么出租车公司或车主无权扣除押金。此时，司机有权要求出租车公司或车主全额返还押金。

三、法律规定的适用

1. 《民法典》的相关规定：根据《民法典》的相关规定，当事人应当按照约定全面履行自己的义务。如果一方不履行合同义务或者履行合同义务不符合约定，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。在出租车租赁合同中，如果司机存在违约行为，出租车公司或车主有权要求其承担违约责任，包括扣除押金。

2. 消费者权益保护：如果出租车司机作为消费者，在租赁过程中认为出租车公司或车主的行为侵犯了其合法权益，如无故扣除押金等，司机可以向消费者协会投诉或向法院提起诉讼，维护自己的合法权益。

四、实际操作建议

1. 仔细阅读合同：在签订出租车租赁合同时，司机应仔细阅读合同条款，特别是关于押金的处理方式、违约责任等条款，确保自己的权益得到保障。

2. 保留证据：在租赁期间，司机应保留好与租赁相关的所有证据，如租金支付凭证、车辆维修记录、交通违规处理记录等，以便在发生纠纷时作为证据使用。

3. 协商解决：如果发生押金扣除纠纷，司机应首先与出租车公司或车主进行协商，尝试通过友好方式解决问题。

4. 寻求法律帮助：如果协商无果，司机可以寻求法律帮助，如咨询律师或向法院提起诉讼，维护自己的合法权益。

如果您在出租车租赁过程中遇到押金扣除等法律问题，欢迎直接向我咨询。我会根据您的具体情况，为您提供专业的法律建议和帮助。