核心结论：对方能否要回土地，需结合协议效力、履行情况、是否存在法定解除或无效情形综合判断。若协议合法有效且无解除事由，您有权拒绝返还；若存在无效或可解除情形，对方可能通过法律途径收回土地。以下分情况具体说明：

1. 协议合法有效且无解除事由：您有权拒绝返还

• 法律依据：根据《民法典》第465条，依法成立的合同受法律保护，对双方具有法律约束力。若协议内容不违反法律强制性规定（如未改变土地农业用途、未损害集体利益）、双方意思表示真实（无欺诈、胁迫），且已实际履行（如您已支付租金、实际使用土地），则协议合法有效。
• 操作建议：
  • 保留协议原件、租金支付凭证（如转账记录、收据）、土地使用证据（如耕种照片、经营记录），证明协议合法且已履行；
  • 若对方无理要求返还，可明确拒绝并告知其通过法律途径解决；
  • 若对方起诉，积极应诉，提供上述证据证明协议效力。

2. 协议存在无效情形：对方可能收回土地

• 常见无效情形：
  • 违反法律强制性规定：如协议约定将耕地转为建设用地（如建房、办厂），违反《土地管理法》第4条“严格保护永久基本农田，禁止非法占用耕地建房”等规定；
  • 损害集体利益：如承租人未经集体同意私自转租，或租金明显低于市场价损害集体经济组织权益；
  • 以合法形式掩盖非法目的：如以承租为名行买卖土地之实。
• 操作建议：
  • 立即自查协议内容及土地使用方式，若存在上述情形，可能面临协议被认定无效的风险；
  • 若对方已起诉确认协议无效，需提供证据反驳（如集体同意转租的证明、租金合理的依据），或协商补救措施（如调整土地用途、补签集体同意文件）。

3. 协议可解除的情形：对方可能收回土地

• 法定解除权：根据《民法典》第563条，若您存在以下行为，对方有权解除协议：
  • 根本违约：如长期拖欠租金、擅自改变土地用途（如将耕地改为林地）、严重破坏土地（如挖沙取土）；
  • 预期违约：如明确表示不再履行协议（如口头或书面通知对方不再承租）。
• 约定解除权：若协议中约定了解除条件（如“承租人逾期支付租金超30日，出租人有权解除”），且条件已成就，对方可依约解除。
• 操作建议：
  • 若您存在违约行为，建议尽快补救（如补交租金、恢复土地原状），避免对方解除协议；
  • 若对方已通知解除，需审查其解除理由是否成立（如是否符合法定或约定条件），若不成立可拒绝并要求继续履行；
  • 若协议已解除，需按约定或法律规定返还土地，并协商赔偿问题（如对方因您违约遭受的损失）。

4. 特殊情形：土地权属争议

• 风险点：若对方并非土地合法权利人（如无承包经营权证、未获集体授权），或土地存在权属纠纷（如集体与村民、村民与村民之间争议），则协议可能因主体不适格或标的违法而无效。
• 操作建议：
  • 要求对方提供土地权属证明（如承包经营权证、集体同意出租的决议）；
  • 若发现权属争议，暂停支付租金并要求对方澄清，避免因继续履行导致损失扩大；
  • 若已涉及诉讼，可申请追加实际权利人（如集体经济组织）为第三人，查明权属后处理。

总结：对方能否要回土地，关键在于协议效力及履行情况。建议您先自查协议内容、土地使用方式及对方主体资格，若协议合法且无解除事由，可拒绝返还；若存在风险，建议尽快协商补救或咨询专业律师制定应对方案。如有进一步证据或细节需要分析，可直接向我提供材料，我会为您详细解答。