结论：男人到了退休年龄还在公司上班，如果公司叫他不上班了，是否需要赔钱，需根据具体情况判断，主要分为以下两种情况：

1. 已享受养老保险待遇或领取退休金

   • 法律背景：根据《最高人民法院关于审理劳动争议案件适用法律问题的解释（一）》第三十二条第一款，用人单位与其招用的已经依法享受养老保险待遇或者领取退休金的人员发生用工争议而提起诉讼的，人民法院应当按劳务关系处理。
   • 分析：在此情况下，劳动者与用人单位之间形成的是劳务关系，而非劳动关系。劳务关系中，双方的权利义务由双方协商确定，不受《劳动法》、《劳动合同法》等劳动法律法规的调整。因此，如果公司因劳动者达到退休年龄而终止劳务关系，并不构成违法解除，无需支付经济补偿或赔偿金。

2. 未享受养老保险待遇或领取退休金

   • 法律背景：根据《最高人民法院关于审理劳动争议案件适用法律问题的解释（一）》第三十二条第二款，用人单位与其招用的已经达到或者超过法定退休年龄但未享受基本养老保险待遇或领取退休金的人员，双方发生的用工争议，按劳动关系特殊情形处理。同时，根据《劳动合同法》第四十四条第二项，劳动者开始依法享受基本养老保险待遇的，劳动合同终止。但此条款并未规定达到退休年龄但未享受养老保险待遇的劳动合同自动终止。
   • 分析：
     • 若劳动合同未到期：公司因劳动者达到退休年龄而单方面解除劳动合同，可能构成违法解除。根据《劳动合同法》第四十八条、第八十七条，劳动者有权要求公司继续履行劳动合同或者支付赔偿金。赔偿金的标准为经济补偿标准的二倍，经济补偿按劳动者在本单位工作的年限，每满一年支付一个月工资的标准向劳动者支付。六个月以上不满一年的，按一年计算；不满六个月的，向劳动者支付半个月工资的经济补偿。
     • 若劳动合同到期：公司可以选择不续签劳动合同，但根据《劳动合同法》第四十六条第五项，除用人单位维持或者提高劳动合同约定条件续订劳动合同，劳动者不同意续订的情形外，劳动合同期满终止固定期限劳动合同的，用人单位应当向劳动者支付经济补偿。经济补偿的计算方式同上。但需注意，如果劳动者达到退休年龄是劳动合同终止的法定事由，且双方对此有明确约定，公司可能无需支付经济补偿。不过，这一观点存在争议，具体需结合地方性法规和司法实践判断。

建议：

• 对于劳动者而言，如果公司因达到退休年龄而要求终止用工关系，应首先确认自己是否已享受养老保险待遇或领取退休金。如果未享受，可以与公司协商，要求继续履行劳动合同或支付相应的经济补偿/赔偿金。如果协商不成，可以向劳动争议仲裁委员会申请仲裁，维护自己的合法权益。
• 对于公司而言，在处理此类问题时，应谨慎操作，确保符合法律法规的规定。如果决定终止用工关系，应提前与劳动者沟通，明确告知相关权利和义务，避免引发不必要的法律纠纷。

可能后果：

• 如果公司违法解除劳动合同或未按规定支付经济补偿/赔偿金，劳动者有权向劳动争议仲裁委员会申请仲裁，要求公司承担相应的法律责任。仲裁裁决后，如果公司仍不履行，劳动者可以向人民法院申请强制执行。