核心结论：针对您不在场时他人填错土地且不归还的情况，可分以下步骤处理：

1. 固定证据，明确权属

• 核心前提：土地权属争议需以合法证据为基础。
• 操作建议：
  • 收集土地权属证明（如土地证、承包合同、政府确权文件等），证明您对争议土地的合法权利。
  • 留存填错土地的现场证据（如照片、视频、第三方证人证言），证明对方行为已构成侵权。
  • 若对方承认填错土地，可要求其出具书面说明或录音录像，固定其过错事实。

2. 协商解决，优先沟通

• 核心前提：协商是成本最低的解决方式。
• 操作建议：
  • 联系对方或其家属，明确告知其填错土地的事实及您的权属主张，要求其限期恢复原状或赔偿损失。
  • 协商时可提出具体方案（如对方自行清理填土、补偿您清理费用等），并留存协商记录（如微信聊天记录、通话录音）。

3. 行政投诉，借助政府力量

• 核心前提：若协商无果，可向相关部门投诉。
• 操作建议：
  • 向当地自然资源局（原国土局）或农业农村局投诉，反映对方非法占用土地的行为，要求行政机关介入调查并责令整改。
  • 投诉时需提交权属证明、现场照片等证据，行政机关调查后可能作出责令退还土地、罚款等决定。

4. 民事诉讼，维护合法权益

• 核心前提：若行政途径无法解决，可向法院起诉。
• 操作建议：
  • 以“排除妨害纠纷”或“财产损害赔偿纠纷”为案由，向法院提起诉讼，要求对方停止侵害、恢复原状或赔偿损失。
  • 诉讼时需提交权属证明、侵权证据、损失计算依据（如清理费用、土地收益损失等）。
  • 法院判决后，若对方拒不履行，可申请强制执行。

5. 刑事报案（极端情况）

• 核心前提：若对方行为涉嫌犯罪（如故意毁坏财物、非法占用农用地等）。
• 操作建议：
  • 向公安机关报案，要求追究对方刑事责任。
  • 需提供证据证明对方行为具有故意性或违法性（如多次填土、拒不整改等）。

温馨提示：处理此类纠纷时，建议优先通过协商或行政途径解决，以降低时间成本。若对方态度强硬或损失较大，可及时委托律师介入，制定诉讼策略。如有进一步问题，可直接向我咨询。