结论前置：单位直接让工作了24年的临时工离职，这一做法通常是不合适的，可能涉及违法解除劳动合同，需要承担相应的法律责任。下面我将从多个角度为您详细分析。

一、临时工的法律地位与劳动合同

首先，需要明确的是，在我国法律体系中，并没有“临时工”这一独立的法律概念。无论工作期限长短，劳动者与用人单位之间建立的都是劳动关系，都应当签订书面劳动合同（除非符合非全日制用工等特定情形）。因此，您所说的“临时工”，在法律上应视为与单位建立了劳动关系的劳动者。

二、单位解除劳动合同的合法性

根据《中华人民共和国劳动合同法》的相关规定，用人单位解除劳动合同必须符合法定情形，并遵循法定程序。这些情形包括但不限于：

1. 协商一致解除：用人单位与劳动者协商一致，可以解除劳动合同。
2. 过错性解除：劳动者存在严重违反用人单位规章制度、严重失职、营私舞弊给用人单位造成重大损害等情形时，用人单位可以解除劳动合同。
3. 非过错性解除：在劳动者患病或者非因工负伤，在规定的医疗期满后不能从事原工作，也不能从事由用人单位另行安排的工作；或者劳动者不能胜任工作，经过培训或者调整工作岗位，仍不能胜任工作；或者劳动合同订立时所依据的客观情况发生重大变化，致使劳动合同无法履行，经用人单位与劳动者协商，未能就变更劳动合同内容达成协议等情形下，用人单位提前三十日以书面形式通知劳动者本人或者额外支付劳动者一个月工资后，可以解除劳动合同。
4. 经济性裁员：在用人单位生产经营发生严重困难等特定情形下，用人单位可以按照法定程序进行经济性裁员。

若单位直接让您离职，并未遵循上述法定情形和程序，则属于违法解除劳动合同。

三、违法解除劳动合同的法律后果

如果单位违法解除劳动合同，根据《劳动合同法》的规定，您有权要求单位继续履行劳动合同，或者要求单位支付赔偿金。赔偿金的计算标准为：按照您在单位的工作年限，每满一年支付一个月工资的标准向您支付。六个月以上不满一年的，按一年计算；不满六个月的，向您支付半个月工资的经济补偿。因此，您在单位工作了24年，如果单位违法解除劳动合同，您有权要求单位支付24个月工资的赔偿金。

四、建议与行动

1. 收集证据：首先，建议您收集与单位存在劳动关系的证据，如劳动合同、工资单、工作证等，以及单位直接让您离职的相关证据，如离职通知、聊天记录等。
2. 协商与调解：您可以尝试与单位进行协商，看是否能够达成和解。如果协商不成，您可以向当地的劳动争议调解组织申请调解。
3. 申请劳动仲裁：如果调解不成，您可以向当地的劳动争议仲裁委员会申请劳动仲裁，要求单位支付赔偿金或继续履行劳动合同。
4. 提起诉讼：如果您对劳动仲裁结果不服，还可以向人民法院提起诉讼。

总之，单位直接让工作了24年的您离职，这一做法通常是不合适的，可能涉及违法解除劳动合同。您有权要求单位承担相应的法律责任，并可以通过协商、调解、劳动仲裁或诉讼等途径来维护自己的合法权益。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。