结论：已达退休年龄的员工继续在单位劳动，公司并非可以随时解除劳动合同，而是需要根据具体情况和法律法规来综合判断。
一、一般情况下劳动合同终止的法律依据
根据《中华人民共和国劳动合同法实施条例》第二十一条规定，劳动者达到法定退休年龄的，劳动合同终止。这一规定为公司在员工达到退休年龄时终止劳动合同提供了法律依据。然而，这一终止并非无条件的，而是需要满足一定的前提，即员工已经依法享受基本养老保险待遇。
二、特殊情况下劳动合同不能简单解除
未享受基本养老保险待遇：如果员工达到退休年龄，但因养老保险累计缴费年限不足等原因无法享受基本养老保险待遇，那么劳动合同并不必然终止。根据《中华人民共和国劳动合同法》第四十四条的规定，劳动合同期满且劳动者开始依法享受基本养老保险待遇时，劳动合同才终止。因此，在这种情况下，公司不能以员工达到退休年龄为由单方面解除劳动合同。
双方协商继续履行：即使员工达到退休年龄并享受了基本养老保险待遇，如果双方均有意愿继续合作，也可以协商签订劳务合同，建立劳务关系。劳务关系主要受民事法律法规的调整，相较于劳动合同关系更为灵活，可以满足双方继续合作的需求。
三、公司解除劳动合同的注意事项
确认退休年龄与保险待遇：在解除劳动合同前，公司应首先确认员工已达到法定退休年龄，并已依法享受基本养老保险待遇。这是解除劳动合同的前提条件，也是避免法律纠纷的关键。
提前通知与办理离职手续：公司应提前以书面形式通知员工劳动合同即将终止，明确告知终止原因及办理离职手续的时间和相关要求。同时，公司应协助员工办理离职手续，包括结算工资、支付经济补偿（如劳动合同中有相关约定）、办理工作交接等。
经济补偿与退休手续：如劳动合同中有关于经济补偿的约定，公司应按约定支付。同时，公司还应按照相关法律法规的规定为员工办理退休手续，确保员工的合法权益得到保障。
四、实际案例与法律建议
实际案例：某员工达到退休年龄后，因社保缴费年限不足无法享受基本养老保险待遇。公司试图以员工达到退休年龄为由解除劳动合同，但员工认为公司应继续履行劳动合同并补缴社保费用。双方因此产生纠纷并诉至法院。法院经审理认为，公司不能随意解除劳动合同，应继续履行劳动合同并补缴社保费用直至员工满足享受基本养老保险待遇的条件。
法律建议：
依法行事：公司在处理与达到退休年龄员工的劳动关系时，必须确保解除劳动合同的行为符合相关法律法规的规定，避免因违法解除而引发法律纠纷。
谨慎判断：对于达到退休年龄但未享受基本养老保险待遇的员工，公司应谨慎判断其劳动关系是否应继续存续，避免不当解除劳动合同。
关注员工权益：即使员工到达退休年龄并解除劳动合同，其仍可能享有养老保险、医疗保险等社会保障待遇。公司在处理此类问题时，应充分考虑员工的权益保障问题，确保员工的合法权益不受损害。
综上所述，已达退休年龄的员工继续在单位劳动时，公司并非可以随时解除劳动合同。而是需要根据具体情况和法律法规来综合判断，并确保操作合法合规，充分保障员工的合法权益。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。