核心结论：您是否需要返还土地取决于合同效力、土地性质及流转程序合法性。若合同有效且程序合法，您有权拒绝返还；若存在违法情形，对方可能通过法律途径主张权利。以下分情况说明：

1. 合同效力是关键前提

• 有效合同：若双方签订的合同符合《民法典》第143条（行为人具有民事行为能力、意思表示真实、不违反法律强制性规定），且土地流转未违反《农村土地承包法》的禁止性规定（如非本集体经济组织成员未经批准受让土地），则合同具有法律效力。您有权依据合同占有土地，对方无权单方要求返还。
• 无效合同：若合同存在以下情形，可能被认定无效：
  • 违反法律强制性规定（如将耕地转为非农建设用地）；
  • 恶意串通损害集体利益；
  • 以合法形式掩盖非法目的（如规避土地管理法规）。 此时，对方可能通过诉讼主张合同无效，要求返还土地。

2. 土地性质决定流转限制

• 承包地（耕地、林地、草地）：
  • 根据《农村土地承包法》第34-38条，承包地流转需遵循以下规则：

       - 流转方需有稳定非农职业或收入来源；
       - 需经发包方（村集体）备案或同意（具体看土地类型）；
       - 不得改变土地农业用途。
    

  • 若未履行法定程序（如未备案或改变用途），流转可能被认定无效，对方有权要求返还。
• 宅基地：
  • 宅基地使用权仅限本集体经济组织成员享有，非成员受让宅基地使用权原则上无效（《土地管理法》第62条）。
  • 例外：若您已将户籍迁入该村集体，或通过合法继承取得宅基地使用权，则可能受法律保护。

3. 对方主张返还的救济途径

• 协商解决：建议优先与对方沟通，明确合同效力及土地现状，避免矛盾升级。
• 诉讼途径：若协商无果，对方可能向法院起诉，请求：
  • 确认合同无效；
  • 返还土地并赔偿损失（如土地收益）。
• 行政投诉：若涉及违法占地（如改变农业用途），对方可能向自然资源部门举报，要求查处违法行为。

4. 您的应对建议

• 核查合同与程序：
  • 确认合同是否包含土地位置、面积、用途、流转期限等关键条款；
  • 检查是否履行发包方备案或同意程序（如签订《农村土地流转合同书》并备案）；
  • 确认土地现状是否与合同约定一致（如未擅自改变用途）。
• 收集证据：
  • 保留合同原件、付款凭证、土地使用证明（如耕种记录、建房许可）；
  • 若对方曾书面同意流转（如微信聊天记录、邮件），一并留存。
• 咨询专业律师：
  • 若对方已采取法律行动，或您对合同效力存疑，建议尽快委托律师分析证据、制定应诉策略。

总结：农村土地流转涉及复杂法律关系，需结合合同效力、土地性质及程序合法性综合判断。建议您先自查合同与流转程序，必要时委托律师介入，以最大限度维护自身权益。如有进一步问题，可直接向我咨询。