结论：能否要回押金需根据合同具体条款、未履行合同的原因及双方协商情况综合判断，以下分情况说明：

1. 若合同明确约定未履行合同日押金的处理方式
   需优先审查合同条款。例如合同中若写明“若乙方未履行至合同约定日期，押金不予退还”或“押金作为违约金扣除”，则中介有权依据合同条款拒绝退还押金。此时需判断该条款是否显失公平（如押金金额远超实际损失），若存在显失公平情形，可主张调整或撤销该条款。

2. 若合同未明确约定押金处理方式，但未履行合同日存在合理理由
   如因不可抗力（如突发疾病、自然灾害等）或中介违约（如未提供承诺的服务、虚假宣传等）导致无法履行合同，可主张押金应全额或部分退还。此时需收集证据证明未履行合同的原因非自身过错，例如医疗证明、中介违约的聊天记录或录音等。

3. 若合同未明确约定押金处理方式，且未履行合同日无合理理由
   根据《民法典》第五百七十七条，当事人一方不履行合同义务，应承担违约责任。若押金性质被认定为“定金”（需合同明确约定或双方认可），则适用定金罚则，即给付定金方不履行债务的，无权要求返还定金；若押金性质为“预付款”或“担保金”，则中介应退还押金，但可能需扣除实际损失（如已产生的中介服务成本）。此时需中介举证其实际损失金额，若无法举证，则应全额退还。

建议行动步骤：

1. 仔细审查合同条款，重点关注押金性质、违约责任等条款；
   
2. 收集未履行合同的原因证据（如不可抗力证明、中介违约证据等）；
   
3. 与中介协商，明确押金退还诉求及依据；
   
4. 若协商无果，可向当地消费者协会投诉或通过诉讼解决。
   

如有进一步疑问或需具体分析合同条款，可直接向我咨询。