当中介收取佣金但未在合同中明确时，您是否有权要求退回这部分费用，主要取决于中介是否成功促成了合同成立以及双方之前的约定。

首先，根据《民法典》第九百六十四条的规定，如果中介人未促成合同成立的，那么他们不得请求支付报酬。这意味着，如果中介虽然提供了服务但最终没有帮助您达成交易或签订合同，那么他们无权要求您支付佣金。

然而，法律也规定，即使合同未成立，中介人可以按照约定请求委托人支付从事中介活动支出的必要费用。这表示，如果中介在提供服务过程中产生了某些必要的支出（如交通费、通讯费等），并且这些支出在双方之前的约定中得到了认可，那么您可能需要支付这部分费用。

因此，要确定您是否有权要求退回中介收取的佣金，您需要回顾与中介之间的约定以及中介是否成功促成了合同成立。如果中介未促成合同成立，并且没有合理的必要费用支出，那么您有权要求退回佣金。但如果中介有合理的必要费用支出或者双方之前有关于这部分费用的约定，那么您可能需要支付这部分费用。

在处理这类问题时，建议您与中介进行友好协商，并尽量保留相关证据（如聊天记录、邮件往来等），以便在需要时维护自己的权益。如果协商无果，您还可以考虑寻求法律援助或向相关部门投诉。