结论：自留地荒了几年后，即使经家人同意别人种植长期作物24年，您仍有权追回该自留地，但可能需根据具体情况对种植者的投入进行合理补偿。

分析说明：

1. 自留地的性质与归属：

   • 自留地是农村集体经济组织按政策规定分配给成员长期使用的土地，其所有权归集体，但使用权归农户。因此，您对自留地享有使用权，这是追回自留地的基础。

2. 种植行为的性质：

   • 别人在您的自留地上种植长期作物，即使经过了家人的同意，也并不改变自留地的使用权归属。这种种植行为可能构成无权占有或借用关系，但并不导致自留地使用权的转移。

3. 追回自留地的法律依据：

   • 根据《中华人民共和国土地管理法》及相关农村土地政策，您作为自留地的使用权人，有权要求停止侵害、恢复原状或返还土地。因此，您有权追回被他人种植的自留地。

4. 种植者投入的补偿问题：

   • 虽然您有权追回自留地，但如果种植者在种植过程中投入了大量的人力、物力和财力，且这些投入已经与土地形成了紧密的附着关系（如种植了长期作物），那么根据公平原则，您可能需要对种植者的合理投入进行补偿。补偿的具体金额和方式可以根据实际情况协商确定，如果协商不成，可以通过法律途径解决。

5. 实际操作建议：

   • 在追回自留地前，建议您先与种植者进行协商，明确双方的权利和义务，以及补偿的具体方案。如果协商不成，您可以向当地农村土地管理部门或人民法院提起诉讼，要求种植者停止侵害、恢复原状或返还土地，并可能涉及对种植者投入的补偿问题。

特殊场景考虑：

• 如果种植者能够证明其种植行为是基于与您或您家人的长期约定或协议，且该约定或协议在法律上具有效力（如书面合同），那么您在追回自留地时可能需要考虑该约定或协议的内容，以及种植者的合理期待利益。但这种情况较为特殊，且需要具体的证据支持。

行动建议：

• 如果您决定追回自留地，建议您先收集相关证据（如自留地的权属证明、种植者的种植行为证据等），然后与种植者进行协商。如果协商不成，您可以咨询专业律师（即向我咨询），了解具体的法律程序和操作步骤，以便更好地维护自己的合法权益。