核心结论：代理费未签合同能否退还及如何退还，需根据具体情况判断，主要分为以下几种情况：

1. 双方已形成事实代理关系，但未签订书面合同
   若双方虽未签订书面合同，但已实际履行了代理行为（如律师已提供法律服务、代理人已开展代理活动），此时双方已形成事实上的代理关系。根据《民法典》第四百九十条，法律、行政法规规定或当事人约定采用书面形式订立合同，当事人未采用书面形式但一方已经履行主要义务，对方接受的，该合同成立。因此，若对方已接受服务，退费需双方协商一致；若对方未履行主要义务或存在违约行为，您可主张解除事实合同并要求退还部分或全部费用，但需提供证据证明对方未履行义务（如服务记录、沟通记录等）。

2. 双方未形成事实代理关系，仅支付了费用但未开始服务
   若您仅支付了代理费，但对方尚未开始提供服务（如律师未开展案件准备、代理人未实际代理事务），此时双方尚未形成事实合同关系。根据《民法典》第五百六十三条，当事人一方迟延履行债务或有其他违约行为致使不能实现合同目的，另一方可以解除合同。您可主张解除合同并要求全额退还费用，但需注意保留支付凭证（如转账记录、收据等）作为证据。

3. 对方存在欺诈、胁迫或显失公平等情形
   若对方在收费时存在欺诈（如虚构服务内容、隐瞒重要信息）、胁迫（如威胁不退款则采取不利措施）或显失公平（如收费明显高于市场合理水平）等情形，您可根据《民法典》第一百四十八条至第一百五十一条主张撤销合同，并要求退还全部费用。此时需提供证据证明对方存在上述行为（如录音、聊天记录、证人证言等）。

建议行动步骤：

1. 收集证据：整理支付凭证、沟通记录、服务记录等，证明双方关系及对方履行情况；
   
2. 协商沟通：与对方协商退费事宜，明确退费金额及方式；
   
3. 书面确认：若协商一致，要求对方出具书面退费协议，避免后续纠纷；
   
4. 法律途径：若协商无果，可向法院起诉或申请仲裁（如有仲裁条款），主张退费及合理损失。
   

温馨提示：法律问题需结合具体证据和细节判断，以上分析仅供参考。若您有进一步问题或需要具体指导，可直接向我咨询，我会结合您的实际情况提供详细解答。