结论先行：针对您提出的“祖祖辈辈管理的闲散地被人侵占”的问题，这涉及到土地权益的侵权问题，您可以通过法律途径来维护自己的合法权益。以下是我从多个角度为您详细分析的情况和建议：
一、明确土地权益
土地所有权与使用权：
- 首先，需要明确这块闲散地的所有权归属。在我国，土地所有权分为国家所有和集体所有两种。如果这块地属于集体所有，那么您需要确认您或您的家族是否拥有合法的使用权或承包经营权。
- 如果您拥有合法的使用权或承包经营权，那么他人侵占您的土地就构成了侵权行为。
证据收集：
- 为了证明您对这块土地拥有合法权益，您需要收集相关证据，如土地承包合同、土地使用证、村集体或相关部门的证明文件等。
- 同时，收集侵占行为的证据，如照片、视频、证人证言等，以证明他人确实侵占了您的土地。
二、法律途径维权
协商调解：
- 在采取法律手段之前，您可以尝试与侵占者进行协商，看是否能够达成和解，恢复土地的原状或获得相应的补偿。
- 如果协商无果，您可以寻求村集体、乡镇政府或相关部门的帮助，进行调解。
提起诉讼：
- 如果协商和调解均无法解决问题，您可以向人民法院提起诉讼，要求侵占者停止侵占行为、恢复土地原状或赔偿损失。
- 在诉讼过程中，您需要提供充分的证据来证明您的主张，并遵循法院的诉讼程序。
三、法律后果与赔偿
法律后果：
- 如果法院认定侵占者确实侵犯了您的土地权益，那么侵占者将需要承担法律责任，包括停止侵占行为、恢复土地原状或赔偿损失等。
赔偿计算：
- 赔偿金额的计算通常根据实际损失来确定，包括土地的使用价值、因侵占导致的经济损失等。
- 如果土地被用于商业开发或其他盈利活动，您还可以要求侵占者分享部分收益或支付相应的使用费。
- 计算公式示例（具体需根据实际情况调整）：赔偿金额 = 土地使用价值损失 + 因侵占导致的直接经济损失（如农作物损失、租金损失等）+ 其他合理费用（如诉讼费、律师费等）。
四、特殊情况考虑
历史遗留问题：
- 如果这块土地存在历史遗留问题，如权属不清、历史上的分配争议等，那么解决起来可能会更加复杂。在这种情况下，您可能需要寻求更专业的法律帮助，以理清历史脉络，明确权益归属。
政策变化影响：
- 土地政策可能会随着时间和社会的变化而调整。在维权过程中，您需要关注相关政策的变化，以确保您的权益得到最大程度的保护。
最后建议：面对土地被侵占的问题，您需要保持冷静，通过合法途径来维护自己的权益。如果您在维权过程中遇到任何困难或疑问，可以直接向我咨询，我会根据您的具体情况提供更详细的法律建议和帮助。