结论：退休时发现档案年龄比实际年龄大五岁，这五年所领取的工资一般不需要退还。但具体情况还需结合档案年龄错误的原因、单位是否知情以及相关法律法规来综合判断。

分析说明：

1. 档案年龄错误的原因：

   • 如果档案年龄错误是由于单位或相关部门的失误造成的，且您在入职时并不知情，那么您没有过错，因此不需要退还这五年所领取的工资。
   • 如果档案年龄错误是您个人提供的虚假信息导致的，那么情况就复杂了。虽然从法律上讲，您可能因欺诈行为而面临一定的法律责任，但在实际操作中，是否要求退还工资还需考虑多种因素，如单位是否因此遭受了实际损失、您的欺诈行为是否被及时发现并纠正等。不过，在大多数情况下，如果单位已经支付了工资，且没有因您的欺诈行为而遭受重大损失，那么要求退还工资的可能性较小。

2. 单位是否知情：

   • 如果单位在您入职时就已经知道档案年龄与实际年龄不符，但仍然选择录用您并支付工资，那么可以视为单位接受了这一事实。在这种情况下，单位通常不会要求您退还工资。
   • 如果单位在您退休时才发现档案年龄错误，且此前并不知情，那么单位可能会根据内部规定或相关法律法规来处理这一问题。但即便如此，要求退还已支付的工资也并非易事，因为这涉及到劳动关系的稳定性、员工的合法权益保护等多方面因素。

3. 相关法律法规：

   • 根据《中华人民共和国劳动法》和相关规定，劳动者有权获得与其劳动相对应的报酬。只要您提供了正常的劳动，单位就应当支付相应的工资。
   • 档案年龄与实际年龄不符，并不直接影响您与单位之间的劳动关系和工资支付。除非能够证明您存在欺诈行为且给单位造成了实际损失，否则单位无权要求您退还已支付的工资。

行动建议：

• 与单位沟通：首先，建议您与单位的人力资源部门或相关负责人进行沟通，了解单位对此事的态度和处理意见。
• 咨询专业律师：如果单位要求您退还工资或您对此事存在疑虑，建议您咨询专业律师以获取更具体的法律建议。虽然我作为李光勇律师可以为您提供一定的法律帮助，但每个案件的具体情况都有所不同，因此专业律师的个性化建议将更为准确和有用。
• 保留相关证据：无论最终处理结果如何，都建议您保留好与此事相关的所有证据，如劳动合同、工资单、档案记录等，以备不时之需。

特殊场景：

• 如果档案年龄错误导致您提前或延迟退休，且因此影响了您的养老金领取等权益，那么您可能需要通过法律途径来维护自己的合法权益。在这种情况下，建议您及时咨询专业律师并准备相关证据材料。