代理留存金并非一个法律上的专业术语，其退还时间通常取决于双方之间的合同约定。具体分析如下：

一. 代理留存金的性质

• 代理留存金通常是商业合作中，一方（如代理商）为获取代理权或保证履行特定义务而向另一方（如委托方）支付的一笔费用。
• 这笔费用的退还条件、时间等通常会在双方签订的代理合同中明确约定。

二. 退还时间的判断

• 依据合同约定：代理留存金的退还时间应首先参考双方签订的代理合同。合同中应会明确约定退还的条件、时间节点以及退还方式等。
• 无合同约定或约定不明：若合同中未明确约定退还时间，或约定不明确，则双方应本着公平、合理的原则进行协商，以确定退还时间。

三. 法律依据的缺失

• 由于代理留存金并非法律上的专业术语，且其退还时间主要取决于双方合同约定，因此无法直接引用具体的法律条文来解答此问题。

我建议：您应首先查阅与对方签订的代理合同，了解代理留存金的具体退还条款。若合同中有明确约定，则按约定执行；若约定不明或未约定，则应与对方进行友好协商，以达成共识。如有进一步需要，您可以继续咨询我。