关于“委托的代理人不能完全履行职责是否可以要求退回代理费”的问题，结论需分情况讨论，具体如下：

1. 合同有明确约定时
   若委托合同中明确约定了代理人的职责范围、履约标准及违约责任（如“未完成XX事项需退还50%代理费”），则代理人未完全履职时，委托人可直接依据合同条款要求退费。此时，合同条款是双方权利义务的核心依据，法院或仲裁机构通常会优先支持合同约定。

2. 合同无明确约定时
   若合同未约定退费条款，需根据《民法典》第九百三十三条（委托合同解除规则）及第九百二十八条（受托人报酬规则）综合判断：

   • 代理人存在重大过错：如因代理人故意或重大过失导致委托事务无法完成（如错过诉讼时效、证据灭失等），委托人可解除合同并要求退还全部或部分代理费。此时需证明代理人的过错与损失之间的因果关系。
     
   • 代理人已履行部分义务：若代理人已完成部分委托事项（如起草合同、参与谈判等），但未达成最终目标，委托人可能需支付与已完成工作对应的报酬，退费比例需根据实际履行情况协商或由法院裁量。
     
   • 不可归责于双方的原因：如因政策变化、第三方原因等导致委托事务无法完成，且双方均无过错，委托人可能无法要求退费，但可协商终止合同。

3. 实务建议

   • 签约前：在委托合同中明确约定代理人的职责范围、履约标准、违约责任及退费条件（如“未完成立案手续退还30%费用”），避免模糊表述。
     
   • 履约中：保留代理人未履职的证据（如沟通记录、工作成果缺失证明等），以便后续维权。
     
   • 争议解决：若协商无果，可依据合同约定向仲裁机构申请仲裁或向法院起诉，主张退费及赔偿损失。

示例：
若委托律师代理诉讼，合同约定“律师需在30日内完成立案材料准备”，但律师因疏忽未按时提交导致案件被驳回，委托人可依据合同约定或《民法典》第九百三十三条要求解除合同并退还全部代理费。

进一步思考：
若代理人未完全履职但已产生必要成本（如差旅费、材料费等），退费时可能需扣除合理费用。具体比例需结合合同约定及实际损失综合判断。

如有具体合同条款或案件细节，可进一步向我咨询，我会结合实际情况提供更精准的分析。