核心结论：卖自家承包的责任田给别人建宅属于违法行为，可能面临土地管理部门的处罚，同时买卖合同无效，双方需承担相应法律责任。以下从多个角度进行详细分析：

1. 法律性质与规定
   根据《中华人民共和国土地管理法》第二条第三款及第六十二条，农村土地（包括责任田）属于农民集体所有，个人仅享有承包经营权，不得擅自买卖、转让或改变土地用途。宅基地使用权仅限本集体经济组织成员申请，且需符合“一户一宅”原则。将责任田出售给他人建宅，属于非法转让土地使用权及擅自改变土地用途，违反法律强制性规定。

2. 合同效力问题
   根据《中华人民共和国民法典》第一百五十三条，违反法律、行政法规强制性规定的合同无效。因此，买卖责任田的合同自始无效，双方需返还财产（如已支付款项需退还，已建房屋可能面临拆除或没收），若造成损失，需根据过错程度分担赔偿责任。

3. 行政处罚风险
   土地管理部门可依据《土地管理法》第七十七条、第八十二条对买卖双方进行处罚：

   • 对卖方：责令限期改正，没收违法所得；情节严重的，可能面临罚款或刑事责任（如构成非法转让、倒卖土地使用权罪）。
     
   • 对买方：责令限期拆除在非法占用的土地上新建的房屋，恢复土地原状；逾期不拆除的，由相关部门强制执行，费用由买方承担。

4. 实务建议

   • 立即停止违法行为：若交易尚未完成，应终止合同并恢复土地原状；若已建成房屋，需主动向土地管理部门报告，配合调查处理。
     
   • 协商补救措施：双方可协商退还款项、拆除房屋或通过合法途径（如申请宅基地）解决居住需求，但需以符合土地管理法规为前提。
     
   • 法律风险防范：未来涉及土地交易时，务必确认土地性质（如是否为建设用地）、用途及权属，并依法办理审批手续，避免类似纠纷。

总结：责任田的承包经营权受法律保护，但不得擅自转让或改变用途。若已发生此类行为，建议尽快咨询专业律师，评估具体风险并制定补救方案，以减少损失。