结论：能否退回押金取决于租赁合同中的具体约定以及实际履行情况，包括是否存在违约行为、合同解除条件是否成就等因素。以下从不同角度进行分析：

1. 合同约定优先：

   • 有明确约定：如果租赁合同中明确规定了押金退还的条件和程序，例如“承租人提前解除合同需提前XX日通知，且无违约行为时，出租人应在合同解除后XX日内退还押金”，则应按照合同约定执行。在此情况下，若您仅住了几天但符合合同约定的退还条件，出租人应当退还押金。
   • 无明确约定：若合同未对押金退还作出明确约定，则需依据《中华人民共和国民法典》等相关法律法规及行业惯例进行判断。

2. 实际履行情况：

   • 无违约行为：若您在租赁期间未违反合同约定，如按时支付租金、未损坏房屋及设施等，且合同未约定提前解除合同需承担违约责任或扣除押金，则您有权要求出租人退还押金。
   • 存在违约行为：若您在租赁期间存在违约行为，如未按时支付租金、损坏房屋及设施等，出租人有权根据合同约定或法律规定扣除相应费用后，将剩余押金退还给您。若扣除费用后押金不足，出租人还有权要求您补足差额。

3. 合同解除条件：

   • 协商一致解除：若您与出租人协商一致解除合同，且双方对押金退还无异议，则出租人应退还押金。
   • 法定解除：若因不可抗力、出租人违约等原因导致合同法定解除，您有权要求出租人退还押金。若因您自身原因导致合同解除，且合同未约定或法律未规定需承担违约责任或扣除押金，则出租人仍应退还押金。

4. 特殊情况：

   • 押金性质：若押金被约定为“定金”性质，则根据《中华人民共和国民法典》关于定金的规定，若您作为给付定金的一方不履行债务或者履行债务不符合约定，致使不能实现合同目的的，无权请求返还定金；若出租人作为收受定金的一方不履行债务或者履行债务不符合约定，致使不能实现合同目的的，应当双倍返还定金。但需注意，定金数额不得超过主合同标的额的百分之二十，超过部分不产生定金的效力。
   • 合同无效或撤销：若租赁合同因存在欺诈、胁迫、重大误解等情形被认定无效或被撤销，您有权要求出租人退还押金，并可能要求出租人承担损害赔偿责任。

建议：

• 查阅合同：首先查阅租赁合同中关于押金退还的约定，了解自己的权利和义务。
• 与出租人协商：若合同未明确约定或存在争议，建议与出租人进行友好协商，寻求双方都能接受的解决方案。
• 寻求法律帮助：若协商无果，且您认为自己的权益受到侵害，可以向我咨询或寻求其他法律帮助，通过法律途径维护自己的合法权益。