关于“中介费可以不退吗”这个问题，其实并不能一概而论，而是需要根据具体情况和相关法律法规来判断。

首先，如果中介未能按照与你签订的中介服务合同约定提供服务，比如未促成交易、未提供约定的房源信息或未完成协助办理手续等，却收取了中介费且拒绝退还，那么在这种情况下，你是有权要求中介退还中介费的。因为根据《合同法》的相关规定，当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。

其次，如果中介在服务过程中存在欺诈行为，比如故意隐瞒重要信息、提供虚假房源或交易信息等，导致你遭受损失，并据此收取了中介费，那么你同样有权要求中介退还中介费，并可以要求其承担损害赔偿责任。因为根据《民法典》及相关法律规定，欺诈行为导致的合同是可撤销的，且受欺诈方有权请求对方承担损害赔偿责任。

另外，如果中介服务合同存在无效（如欺诈、胁迫订立）或可撤销（如重大误解、显失公平）的情形，你也可以请求法院确认合同无效或撤销，并要求中介返还财产、赔偿损失。

然而，也有一些情况下中介费是不需要退还的。比如，如果中介已经按照合同约定成功促成了交易，提供了完整准确的信息并协助完成了各项手续，那么中介就有权收取中介费，此时你要求退还中介费通常是不会得到法院支持的。另外，如果因为你自己改变主意、资质问题等自身原因导致交易无法完成，且中介并无过错，那么在这种情况下，如果合同中没有约定中介费需要退还，你要求退还中介费也可能会面临败诉的风险。

因此，面对中介费是否需要退还的问题，我建议你首先尝试与中介进行友好协商，明确指出中介的违约行为或未履行合同义务的情况，要求其退还中介费。如果协商无果，你可以向消费者协会、行业协会或主管部门投诉，请求他们介入帮助调解或处理。如果仍然无法解决问题，你可以考虑通过法律途径来维护自己的合法权益，比如发送律师函、申请仲裁或提起诉讼等。在整个过程中，务必保留好所有与中介的沟通记录和相关证据，这是维权的关键。