结论：在合同签了且押金租金都付了的情况下，把钱退了是否算违约，这取决于退钱的原因、合同中的相关条款以及双方当事人的协商情况。以下从不同角度进行分析：
合同条款的约定：
- 如果合同中明确规定了退租或解约的条件和程序，并且你按照这些条款进行了操作，那么退钱可能不构成违约。例如，合同中可能规定了提前通知期限、违约金支付等条款，如果你满足了这些条件，那么退租并退还押金租金是合法的。
- 如果合同中没有明确规定退租或解约的条件，或者你未按照合同规定的程序进行操作，那么退钱可能构成违约。此时，对方有权要求你承担违约责任，包括但不限于支付违约金、赔偿损失等。
双方当事人的协商：
- 即使合同中没有明确规定退租或解约的条件，如果双方当事人能够就退租和退还押金租金达成一致意见，那么这种行为也是合法的，不构成违约。协商是解决合同纠纷的一种重要方式，双方可以通过友好协商来达成共识。
- 如果双方无法就退租和退还押金租金达成一致意见，那么退钱的一方可能构成违约。此时，对方有权通过法律途径来维护自己的权益。
退钱的原因：
- 如果退钱是因为你自身的原因（如个人计划变更、经济困难等），并且这种原因不符合合同中规定的免责条款或解约条件，那么退钱可能构成违约。
- 如果退钱是因为对方的原因（如对方违反合同约定、提供不符合要求的租赁物等），并且你因此有权解除合同并要求退还押金租金，那么这种行为不构成违约。在这种情况下，你甚至有权要求对方承担违约责任。
法律建议：
- 在决定退租并退还押金租金之前，建议你先仔细审查合同中的相关条款，了解自己的权利和义务。
- 如果合同中没有明确规定或者你对合同条款有疑问，建议你与对方进行友好协商，寻求双方都能接受的解决方案。
- 如果协商无果或者对方坚持认为你构成违约，你可以考虑咨询专业律师（比如我，谭正德律师，专注于刑事辩护、合同纠纷领域），了解自己的法律地位和可能的法律后果，并寻求法律途径来维护自己的权益。
可能后果：
- 如果你构成违约，对方有权要求你承担违约责任，包括但不限于支付违约金、赔偿损失等。
- 如果对方构成违约，你有权要求对方承担违约责任，并可能通过法律途径来维护自己的权益，如要求对方继续履行合同、支付违约金或赔偿损失等。