当您的责任田被他人侵占时，您可以通过以下步骤来维护自己的合法权益并尝试要回被侵占的土地：
一、初步协商与证据收集
与侵占方协商：
- 首先，尝试与侵占方进行友好协商，明确表达您的土地权益，并要求其停止侵权、返还土地。
- 在协商过程中，尽量保持冷静和理智，避免冲突升级。
收集证据：
- 整理并收集所有能证明您对土地拥有合法权益的文件，如土地承包合同、土地权属证明（如土地使用证、土地承包经营权证等）、侵占前后土地状况的影像资料等。
- 这些证据在后续的法律程序中至关重要，将作为您维权的有力依据。
二、向相关部门反映与申请调解
向当地乡（镇）政府或县级以上农业农村主管部门反映：
- 携带收集到的证据，向当地乡（镇）政府或县级以上农业农村主管部门报告情况，请求其责令侵占方退还土地。
申请调解：
- 若协商和向政府部门反映均未能解决问题，您可以向村民委员会、乡（镇）人民政府等基层组织申请调解。
- 调解过程中，应积极配合调解人员的调解工作，争取达成和解协议。
三、法律途径维权
提起民事诉讼：
- 若调解无果，您可以向人民法院提起民事诉讼，以侵占者为被告，提交收集好的证据，诉求为要求对方返还土地并赔偿因侵占造成的损失。
- 在诉讼过程中，您需要明确诉求，并提供充分的证据支持您的主张。
申请强制执行：
- 若您胜诉，但侵占方拒不执行法院判决，您可以向人民法院申请强制执行，以确保判决得到履行。
四、其他注意事项
涉及治安或刑事问题：
- 若侵占行为涉及违反治安管理或构成犯罪，您还可以向公安机关报案，由公安机关依法给予治安管理处罚或追究刑事责任。
农作物损失赔偿：
- 如因侵占导致农作物损失，您有权要求侵占方对因侵占导致的农作物收成减少等损失进行合理赔偿。
专业法律咨询：
- 在整个维权过程中，如遇复杂情况或法律难题，建议您咨询专业律师或法律机构，以获取更具针对性、更有效的法律建议和支持。
综上所述，当您的责任田被他人侵占时，应首先尝试通过协商和调解解决问题；若协商和调解无果，则应及时采取法律途径维权，确保自己的合法权益得到保护。