结论前置：单位领导在员工旷工4年后声称“想什么时候解除劳动合同都行”的说法，并不完全合法，单位解除劳动合同必须遵循法定程序和条件。

一、旷工与劳动合同解除的法律依据

根据《中华人民共和国劳动合同法》的相关规定，劳动者严重违反用人单位的规章制度的，用人单位可以解除劳动合同。旷工，作为违反劳动纪律的行为，如果达到严重程度（如连续旷工多日或累计旷工达到一定天数），确实可能构成用人单位解除劳动合同的合法理由。但关键在于，解除劳动合同必须遵循法定程序。

二、单位解除劳动合同的法定程序

1. 规章制度制定与公示：用人单位应制定明确的规章制度，规定旷工达到何种程度构成严重违反规章制度，并应将该规章制度公示或告知劳动者。

2. 通知工会：在解除劳动合同前，用人单位应将解除理由通知工会，工会提出意见的，用人单位应研究工会意见，并将处理结果书面通知工会。

3. 书面通知劳动者：用人单位应提前以书面形式通知劳动者解除劳动合同，并说明解除理由。在旷工情况下，这通常意味着用人单位需要向劳动者发出返岗通知，并在劳动者未返岗或未说明合理理由的情况下，再发出解除劳动合同通知。

4. 办理离职手续：解除劳动合同后，用人单位应为劳动者办理离职手续，包括结算工资、出具解除劳动合同证明等。

三、旷工4年后的特殊情况分析

在您描述的情况下，员工已经旷工4年。这通常意味着：

• 单位可能已视为自动离职：一些用人单位的规章制度中可能规定，旷工达到一定天数（如连续旷工15天或累计旷工30天）即视为自动离职。但即便如此，单位也应按照法定程序办理离职手续，并确保规章制度的合法性和公示性。

• 单位未及时处理可能面临风险：如果单位在员工旷工后长时间未采取任何措施，而是突然声称要解除劳动合同，这可能构成违法解除。因为单位未能及时行使管理权，且可能因时间过长而丧失了解除劳动合同的合法依据。

• 诉讼时效问题：虽然劳动合同的解除不直接涉及诉讼时效，但如果员工后续就工资、经济补偿等提起劳动仲裁或诉讼，单位可能因长时间未主张权利而面临不利后果。

四、建议与措施

1. 对于单位：

   • 审查并完善规章制度，明确旷工的处罚措施和解除劳动合同的条件。
   • 在发现员工旷工后，及时发出返岗通知和解除劳动合同通知（如符合解除条件）。
   • 确保所有通知和决定都以书面形式作出，并保留相关证据。

2. 对于员工：

   • 如果认为单位的解除行为违法，可以收集相关证据（如旷工记录、单位通知等）并向劳动仲裁委员会提起劳动仲裁。
   • 在劳动仲裁过程中，积极主张自己的权益，如要求单位支付违法解除劳动合同的赔偿金等。

有问题可以直接向我咨询，我会根据你的具体情况提供更详细的法律建议。