关于农村土地确权在别人家后能否要回的问题，这确实是一个涉及土地权属、使用权以及相关法律法规的复杂问题。以下是我根据相关法律法规和实际情况，为您提供的详细解答：
一、明确土地权属与使用权的基本原则
首先，我们需要明确的是，农村土地一般属于集体所有，农民享有的是土地使用权而非所有权。这意味着，土地的所有权归集体，而农民则通过合法途径获得土地的使用权，用于农业生产、居住等。
二、土地流转的合法性与条件
合法流转：根据《农村土地承包法》等相关法律法规，农民可以依法将土地经营权通过出租（转包）、入股或其他方式流转给他人。但这种流转必须遵循依法、自愿、有偿的原则，并且不得改变土地的所有权性质和农业用途。同时，流转期限也不得超过承包期的剩余期限。
使用期内权益：在土地流转合同或协议的有效期内，建房者（即土地的使用者）通常享有土地的使用权，原土地使用者（即流转方）在合同期内一般无权随意要回土地。除非出现违反合同约定或法律规定的情形，如建房者未按照约定使用土地、未支付流转费用等。
三、非法流转或违反规定的情况
未经审批建房：如果建房者未经合法审批，如未获得宅基地审批或农用地转用审批，就在土地上建房，那么这种建房行为可能是违法的。在这种情况下，原土地使用者有权要求建房者停止违法行为，并可能要求收回土地。
改变土地用途：农村土地有特定的用途限制，如农用地只能用于农业生产。如果建房者擅自改变土地用途，将农用地用于非农业建设（如建房），那么这也是违法的。原土地使用者可以要求建房者恢复土地原状，并可能要求收回土地。
四、特殊情况的处理
合同期满或协商同意：如果土地流转合同期满，或者双方协商同意提前终止合同，那么原土地使用者有可能重新获得土地的使用权。具体是否能够要回土地，还需要依据合同条款和相关法律法规来决定。
政府征地拆迁：即使建房者通过合法方式获得了土地的使用权，但如果政府因公共利益需要进行征地拆迁，那么土地的使用权可能会被收回。在这种情况下，建房者应依法获得相应的补偿。
五、建议与结论
综上所述，农村土地确权在别人家后能否要回，取决于具体的土地使用情况、流转合同的约定以及相关法律法规的规定。在处理此类问题时，我建议您：
咨询专业法律顾问：由于土地问题涉及复杂的法律法规和实际情况，我建议您咨询专业的法律顾问或律师，以明确双方权益，确保合法合规。
审查流转合同：仔细审查您与建房者签订的土地流转合同，了解合同中的权利、义务以及使用期限等关键条款。
遵守法律法规：在处理土地问题时，务必遵守相关法律法规，保护土地资源的合理利用和农民的合法权益。
最后，我希望您能够理性、合法地处理这个问题，避免不必要的法律纠纷。如果您还有其他疑问或需要进一步的帮助，请随时告诉我。