结论：能否要到退休时单位应支付的一次性独生子女费，需视具体情况而定，包括协议内容、当地政策规定以及是否超过诉讼时效等因素。以下从多个角度为您详细分析：
一、协议内容的影响
协议合法有效且明确约定：
- 如果您在退休时与单位签订的协议中明确约定了单位应支付一次性独生子女费，且该协议不违反法律法规的强制性规定，那么该协议是合法有效的。
- 在此情况下，您有权依据协议要求单位支付一次性独生子女费。如果单位拒绝支付，您可以依法向劳动争议仲裁委员会申请仲裁，或者向人民法院提起诉讼。
协议未约定或约定不明：
- 如果协议中未提及一次性独生子女费，或者约定不明确，那么您能否要到这笔费用将取决于当地政策规定以及您能否提供其他证据证明单位应支付该费用。
二、当地政策规定的影响
地方性法规或政策有明确规定：
- 不同地区对于退休人员一次性独生子女费的支付可能有不同的规定。有些地区可能通过地方性法规或政策明确规定了单位应支付一次性独生子女费的条件、标准和程序。
- 如果您所在地区有此类规定，且您符合领取条件，那么您有权要求单位支付一次性独生子女费。
地方性法规或政策无明确规定：
- 如果您所在地区没有明确的法规或政策规定单位应支付一次性独生子女费，那么您能否要到这笔费用将更加依赖于协议内容以及您能否提供其他有力证据。
三、诉讼时效的考虑
- 根据《中华人民共和国劳动争议调解仲裁法》的规定，劳动争议申请仲裁的时效期间为一年。仲裁时效期间从当事人知道或者应当知道其权利被侵害之日起计算。
- 如果您在退休后四年才提出要求支付一次性独生子女费，且没有证据证明存在时效中断或中止的情形，那么您的请求可能因超过诉讼时效而得不到支持。但具体还需结合当地司法实践和法院裁判观点来判断。
四、建议与行动
查阅协议和当地政策：
- 首先，建议您仔细查阅退休时与单位签订的协议，了解其中是否涉及一次性独生子女费的支付问题。
- 其次，查询您所在地区关于退休人员一次性独生子女费支付的相关政策规定，了解您的权益和领取条件。
收集证据并咨询专业人士：
- 如果您认为单位应支付一次性独生子女费，但单位拒绝支付，建议您收集相关证据（如协议、政策文件、工作记录等）以支持您的主张。
- 同时，您可以咨询我这样的专业律师，了解您的具体权益和可行的法律途径。
考虑法律途径：
- 如果协商无果，且您认为自己的权益受到侵害，您可以依法向劳动争议仲裁委员会申请仲裁，或者向人民法院提起诉讼以维护自己的合法权益。
最后，能否要到退休时单位应支付的一次性独生子女费是一个复杂的问题，涉及协议内容、当地政策规定以及诉讼时效等多个方面。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。