要回交给房屋中介的押金（这里假设您所指的“押金”在具体情境中可能等同于“定金”，因为通常押金和定金在法律语境中有相似之处，都涉及款项的退还问题，但具体还需根据合同内容判断），确实需要根据具体情况来采取合适的措施。以下是一些详细的步骤和建议，希望能帮助您解决问题：
一、明确定金/押金性质与合同约定
定金/押金类型：
- 首先，您需要确认这笔款项是立约定金、成约定金、解约定金还是违约定金，或者是单纯的押金。不同类型的定金/押金，其退还规则和条件可能不同。
- 如果是押金，通常是为了确保租赁或交易过程中的某些义务得到履行而支付的，其退还往往与这些义务的履行情况相关。
合同条款：
- 仔细审查您与中介签订的合同或协议，特别是关于定金/押金退还的条件、违约责任等条款。
- 明确双方的权利和义务，以及在不同情况下定金/押金的退还方式。
二、分析可退还定金/押金的情形
不可归责于双方的事由：
- 如果因为政策变化、不可抗力（如自然灾害、政府行为等）导致合同无法履行，您可以主张退还定金/押金。
中介未尽义务：
- 如果中介隐瞒了房源的真实情况、提供了虚假信息，或者没有按照约定提供服务，您有权要求退还定金/押金，并可能追究中介的责任。
协商一致解除合同：
- 如果双方能够达成书面解除协议，并明确约定定金/押金的退还事宜，那么按照协议执行即可。
合同无效或被撤销：
- 如果因为欺诈、胁迫等原因导致合同无效或被撤销，您可以主张返还定金/押金。
三、采取合理措施追回定金/押金
协商解决：
- 主动与中介沟通，说明退还定金/押金的理由，并提供相关证据。
- 尝试通过友好协商的方式解决问题，这通常是最快捷、最经济的途径。
第三方调解：
- 如果协商无果，您可以向消费者协会、房地产管理部门等机构申请调解。
- 这些机构通常具有中立性，能够帮助双方达成公平合理的解决方案。
法律途径：
- 仲裁：如果合同中有仲裁条款，您可以按照约定提交仲裁机构裁决。
- 诉讼：如果无法通过协商或调解解决问题，您可以向有管辖权的人民法院起诉。在起诉时，您需要提供定金/押金收据、合同文本、沟通记录等证据材料。
四、注意事项
保留证据：
- 妥善保存所有与定金/押金支付、合同签订、沟通记录等相关的材料。
- 这些证据在后续协商、调解或诉讼过程中将起到关键作用。
及时行动：
- 一旦发现权益受损，应尽快采取措施，避免超过诉讼时效或其他法律限制期限。
法律咨询：
- 如果情况复杂或您不确定如何处理，建议咨询专业律师以获取针对性的法律意见。
希望以上建议能够帮助您成功要回交给房屋中介的定金/押金。如果您在处理过程中遇到任何困难或疑问，随时欢迎向我咨询。