不能按第一次的年龄退休。针对您提出的问题，我将从以下几个方面进行分析：

一. 退休年龄的认定标准

1. 以身份证上出生年月为准：根据《中华人民共和国劳动法》及相关规定，退休通常是以身份证上记录的出生年月为准来确定退休年龄的。
2. 身份证与档案不一致时的处理：如果身份证上的年龄与档案中的年龄不一致，一般会以档案中最先记载的出生时间为准。这是为了防止人为更改年龄以提前或延迟退休。

二. 更改年龄的可能性

1. 更改身份证年龄的难度：一旦身份证上的年龄被确定，更改起来是相当困难的。除非能提供确凿的出生证明或其他法定证据，证明身份证上的年龄有误，否则很难进行更改。
2. 更改年龄的法律程序：即使有可能更改年龄，也需要经过一系列严格的法律程序，包括提交申请、提供相关证明材料、经过公安机关的审核等。

三. 针对您具体情况的分析

1. 第二次参加工作改小岁数的影响：如果您在第二次参加工作时改小了岁数，这并不会影响您按实际年龄退休的权利。但是，如果身份证和档案上的年龄都被改小了，且没有合法的出生证明或其他证据来更正，那么您可能只能按照这些被改小的年龄来办理退休。
2. 建议采取的措施：我建议您尽快核实自己身份证和档案上的年龄信息，如果发现有误，应尽快准备相关证明材料，向当地公安机关或档案管理部门申请更正。

四. 结论

综上所述，您不能按第一次的年龄退休，而应按照身份证或档案上记录的年龄来办理退休手续。如果对这些记录有异议，应及时申请更正，并提供充分的证明材料。

我的观点是，退休年龄的认定是一个严肃的法律问题，必须按照相关法律法规和规定来执行。如果您对自己的退休年龄有疑问或异议，应及时咨询当地社保部门或专业律师，以维护自己的合法权益。如有进一步需要，您可以继续咨询我。