结论：能否要回这两万手续费，需结合贷款合同条款、手续费性质及收取方资质综合判断，以下分情况说明：
1. 若手续费属于“违规收费”
根据《民法典》及金融监管规定，贷款机构仅能收取合法利息及明确约定的合理费用（如评估费、公证费等）。若手续费属于“变相利息”“服务费”等无明确合同依据的收费，或收取方无金融业务资质（如非银行、持牌消费金融公司），则可能构成违规收费。
处理方式：
- 收集证据：贷款合同、手续费支付凭证、与贷款方的沟通记录等；
- 协商退款：向贷款方提出书面退款要求，明确指出收费违规依据；
- 投诉举报：向当地银保监会、金融监管局或市场监督管理部门投诉；
- 诉讼维权：若协商、投诉无果，可向法院起诉，要求返还违规收费并赔偿损失。
2. 若手续费属于“合法约定费用”
若贷款合同中明确约定了手续费（如“贷款服务费”“管理费”），且收取方具备合法金融资质，则手续费可能被认定为合法。但需注意：
- 费用合理性：手续费金额需与提供的服务成比例，若明显过高（如远超行业平均水平），可能被认定为“显失公平”，可依据《民法典》第151条主张撤销合同或调整费用；
- 信息披露义务：贷款方需在签约前明确告知手续费金额及计算方式，若未履行告知义务，可能构成“欺诈”或“重大误解”，可主张退款。
处理方式：
- 核查合同条款，确认手续费是否明确约定；
- 对比行业收费标准，评估费用合理性；
- 若存在信息披露问题，可向贷款方提出异议，或通过投诉、诉讼解决。
3. 若收取方为“中介机构”
若手续费由贷款中介收取（如助贷公司、咨询公司），需区分两种情况：
- 合法中介服务：若中介提供了实际服务（如匹配贷款产品、协助办理手续），且收费在合同中明确约定，则可能合法；
- 非法中介行为：若中介以“包过”“低息”为幌子收取高额费用，或未提供实际服务，则可能构成欺诈。
处理方式：
- 核实中介资质（如是否持有金融业务许可证）；
- 要求中介提供服务明细及收费依据；
- 若存在欺诈行为，可向公安机关报案或通过民事诉讼追偿。
行动建议
- 立即收集证据：包括贷款合同、手续费支付记录、沟通记录等；
- 书面要求退款：向贷款方或中介发送书面函件，明确退款理由及法律依据；
- 同步投诉举报：向金融监管部门（如银保监会）或消费者协会投诉；
- 咨询专业律师：若涉及金额较大或对方拒绝退款，可委托律师介入，通过法律途径解决。
提示：贷款手续费问题涉及合同、金融监管、消费者权益等多重法律关系，建议根据具体情况选择处理方式。若有进一步疑问，可直接向我提供合同细节，我会为您详细分析。