结论：您是否有权不让第三方争土地并继续耕种，取决于您调换合同的有效性、是否依法办理了相关手续以及第三方主张的合法性。以下从不同角度为您详细分析：
一、合同有效性角度
合同合法有效：
- 如果您与原土地使用者之间的调换合同是双方真实意思表示，且内容合法，没有违反法律、行政法规的强制性规定，那么该合同是合法有效的。
- 在这种情况下，您基于合同取得了土地的使用权，有权按照合同约定使用土地，包括耕种。
- 如果第三方来争土地，您可以依据合同主张自己的权利，拒绝第三方的无理要求。
合同存在瑕疵或无效：
- 如果调换合同存在瑕疵，如一方欺诈、胁迫、恶意串通损害国家、集体或第三人利益，或者合同内容违反法律、行政法规的强制性规定等，那么合同可能被认定为无效或可撤销。
- 在这种情况下，您可能无法完全依据合同主张自己的权利，需要进一步分析具体情况，如合同无效的原因、双方过错程度等，来确定责任承担和土地使用权的归属。
二、依法办理手续角度
已依法办理变更登记：
- 根据《中华人民共和国民法典》等相关法律规定，土地使用权的变更通常需要依法办理变更登记手续。
- 如果您已经依法办理了土地使用权的变更登记，那么您就是土地的合法使用者，有权拒绝第三方的争地行为，并继续耕种土地。
未依法办理变更登记：
- 如果您未依法办理土地使用权的变更登记，那么虽然您与原土地使用者之间的调换合同可能有效，但在法律上，土地的使用权可能仍然归属于原土地使用者。
- 在这种情况下，第三方如果主张对土地的权利，并提供了相应的证据，那么您可能面临一定的法律风险。建议您尽快与原土地使用者协商，依法办理变更登记手续，以保障自己的合法权益。
三、第三方主张合法性角度
第三方主张无合法依据：
- 如果第三方来争土地，但其主张没有合法依据，如无法提供土地使用权证书、合同等证据，或者其主张与事实不符等，那么您可以拒绝第三方的要求，并继续耕种土地。
第三方主张有合法依据：
- 如果第三方能够提供合法依据来主张对土地的权利，如土地使用权证书、有效的合同等，那么您需要进一步分析自己的情况，如调换合同的有效性、是否依法办理了变更登记等。
- 在这种情况下，建议您及时咨询专业律师，了解自己的法律地位和权利义务，以便采取合适的法律措施来维护自己的合法权益。
建议：
- 核实合同效力：首先核实您与原土地使用者之间的调换合同是否合法有效，是否存在瑕疵或无效情形。
- 办理变更登记：如果合同有效且尚未办理变更登记，建议您尽快与原土地使用者协商，依法办理土地使用权的变更登记手续。
- 咨询专业律师：如果第三方来争土地且主张有合法依据，或者您对自己的法律地位和权利义务存在疑问，建议您及时咨询专业律师，以便采取合适的法律措施来维护自己的合法权益。
后续行动：
- 在处理此类纠纷时，务必保持冷静和理性，避免采取过激行为导致纠纷升级。
- 积极收集证据，如合同、付款凭证、变更登记手续等，以证明自己的合法权益。
- 与第三方进行沟通协商，尝试通过友好方式解决纠纷；如果协商无果，可以考虑通过法律途径解决。