结论：老人一般不可以直接依法收回儿子继承的责任田，但存在一些特殊情况或途径可能使老人实现类似目的，以下为你详细分析。

责任田继承相关法律规定

责任田通常属于农村土地承包经营权范畴。根据《中华人民共和国农村土地承包法》规定，家庭承包的承包方是本集体经济组织的农户。在承包期内，家庭成员之一死亡的，如承包方是农户，农户内还有其他人的，死亡人员不发生土地承包经营权的继承，由该农户的其他家庭成员继续承包；若承包方没有其他家庭成员，则土地承包经营权终止，由发包方收回土地。不过，如果承包人应得的承包收益，可以依照继承法的规定继承。这里儿子继承的责任田，严格意义上可能并非是对土地承包经营权的继承，而是在家庭承包框架下基于家庭成员身份享有的土地使用权益。

儿子不赡养公婆与收回责任田的关系

1. 从继承法角度：赡养义务和继承权虽然有一定的关联，但并非绝对对应关系。根据《中华人民共和国民法典》规定，有扶养能力和有扶养条件的继承人，不尽扶养义务的，分配遗产时，应当不分或者少分。但这里涉及的是遗产分配，而责任田并非传统意义上的遗产（如果是承包收益可视为遗产），所以不能直接因为儿子不赡养公婆就收回其“继承”的责任田。
2. 从土地承包经营权流转角度：如果儿子存在严重违反土地承包合同约定或者法律法规规定的行为，例如长期撂荒土地、擅自改变土地用途等，发包方有权收回土地。但这种情况与儿子不赡养公婆并无直接关联。不过，如果老人能够证明儿子获得责任田后存在上述违规行为，可以请求发包方介入处理，发包方在核实情况后可能会收回土地。
3. 从家庭内部协商角度：老人可以尝试与儿子进行协商，说明自己生活困难等情况，希望儿子能够归还责任田或者给予一定的经济补偿。如果儿子同意，双方可以签订书面协议，明确责任田的使用、收益等相关事宜。这种方式虽然不具有强制力，但如果儿子愿意配合，可以较为和平地解决问题。

特殊情况

如果儿子去世后，其配偶、子女等继续承包该责任田，但这些继承人也不赡养老人，老人生活陷入困境。此时老人可以向当地农村集体经济组织或者村民委员会反映情况，请求他们出面协调。农村集体经济组织或者村民委员会可以根据实际情况，组织双方进行调解，争取达成一个双方都能接受的解决方案。如果调解无果，老人也可以考虑通过法律途径解决，但需要收集充分的证据证明自己的诉求合理合法。

建议：老人可以先尝试与儿子进行友好沟通协商，看是否能够解决问题。如果协商不成，可以向当地的农村集体经济组织或者村民委员会寻求帮助，请求他们进行调解。若调解也无法解决问题，老人可以进一步向我咨询具体的法律程序和证据收集等方面的内容，以便通过法律途径维护自己的合法权益。