当您遇到中介贷款钱没下来但服务费不退的情况时，可以按照以下步骤来处理这个问题：

一、明确原因与收集证据

1. 查阅合同条款： 首先，您需要仔细查阅与中介签订的合同或协议，特别是关于服务费退还的相关条款。这有助于您明确在何种情况下可以要求退还服务费，以及退费的具体流程和条件。

2. 与中介沟通协商： 如果您认为符合退费条件但中介拒绝退款，建议您尝试与中介进行友好协商。在协商过程中，明确表达您的退费诉求，并询问中介拒绝退款的具体原因。这有助于您了解中介的立场，并寻找解决问题的途径。

3. 收集相关证据： 在协商过程中及之前，您务必注意收集相关证据，如合同文本、付款凭证、与中介的聊天记录（包括文字、语音、视频等）、邮件往来等。这些证据在后续维权过程中将起到关键作用，有助于您证明自己的权益。

二、采取法律手段维权

1. 向相关部门投诉：

   • 消费者协会：您可以向当地的消费者协会投诉，寻求其帮助和支持。消协通常会提供调解服务，协助您与中介达成和解。
   • 住房和城乡建设部门：如果中介是房地产中介，且其行为不当，您可以向当地住房和城乡建设部门进行投诉。该部门有权对中介机构进行调查和处理。
   • 市场监管部门：您也可以向市场监管部门反映情况，由其依法对中介机构进行监管和处罚。

2. 报警处理： 如果中介的行为涉嫌诈骗或其他违法犯罪活动，您应立即向公安机关报案。警方将依法展开调查，并根据调查结果采取相应的法律措施。

3. 提起诉讼： 若协商无果且其他途径无法解决问题，您可以考虑通过法律诉讼来维护自己的权益。在此过程中，建议您咨询专业律师的意见，准备好充分的证据材料，并按照法院的要求参与诉讼程序。根据《中华人民共和国民法典》的相关规定，中介若不履行合同义务或履行不符合约定，应当承担退还服务费并赔偿损失等违约责任。

三、注意事项

1. 保持冷静理性： 在处理此类纠纷时，您应保持冷静和理性，避免情绪化的行为影响问题的解决。通过合法途径来维护自己的权益是最有效的。

2. 及时行动： 一旦发现中介存在不退钱的问题，您应及时采取行动，以免错过最佳维权时机。拖延时间可能会使证据丢失或变得难以收集。

3. 选择正规中介： 在未来的交易中，建议您选择信誉良好、资质齐全的中介机构进行合作。这可以降低类似风险的发生概率，保护您的合法权益。

希望以上建议能对您有所帮助。如果您在处理过程中遇到任何困难或疑问，建议及时咨询专业律师或相关部门的意见。