结论前置：您家土地被别人确权走，一般情况下是可以起诉往回要的，但能否成功要回土地，需要结合具体情况综合判断。以下从不同角度为您详细分析：
从确权程序合法性角度
- 如果对方的确权程序存在违法情形，比如土地确权过程中，相关部门没有依法进行实地勘查、公告等法定程序，或者存在工作人员滥用职权、徇私舞弊等行为，导致错误地将您家土地确权给对方。在这种情况下，您可以通过行政诉讼的方式，起诉作出确权决定的行政机关，请求法院撤销该确权决定。一旦确权决定被撤销，土地的权属就会恢复到确权之前的状态，您就有机会重新获得土地的合法权属。
- 例如，在某案例中，当地国土部门在土地确权时，没有通知土地的实际使用人到场，也没有进行充分的调查取证，就随意将土地确权给了他人。土地实际使用人发现后，向法院提起了行政诉讼，法院经审理认为国土部门的确权程序违法，最终撤销了确权决定。
从土地权属依据角度
- 若您能够提供充分的证据证明您对土地拥有合法的权属，比如您持有有效的土地承包经营权证、宅基地使用证等权属证书，或者有能够证明土地长期由您使用、管理的相关证据，如缴纳土地相关税费的凭证、村集体组织出具的证明等。而对方无法提供合法有效的权属依据，那么您在诉讼中就有较大的胜诉把握，可以通过民事诉讼的方式，要求对方返还土地。
- 举个例子，您家一直使用某块土地进行耕种，并且持有政府颁发的土地承包经营权证，而对方只是声称该土地是其祖上留下的，但没有任何书面证据支持。在这种情况下，您起诉对方返还土地，法院很可能会支持您的诉求。
从是否存在纠纷解决前置程序角度
- 在一些地区，对于土地权属纠纷，可能规定了必须先经过行政调解或者仲裁等前置程序，只有在对前置程序的处理结果不服时，才能向法院提起诉讼。如果您所在的地区有这样的规定，您需要先按照规定参与前置程序，在满足起诉条件后，再向法院起诉要求要回土地。
- 例如，某地规定土地权属纠纷应先由乡镇人民政府进行调解，如果调解不成，当事人可以向当地的土地仲裁机构申请仲裁，对仲裁结果不服的，才可以向法院起诉。在这种情况下，您就需要先完成调解和仲裁程序，才能进入诉讼环节。
建议：在准备起诉之前，您要尽可能收集和整理与土地权属相关的各种证据，如前面提到的权属证书、使用证明等。同时，建议您咨询专业的法律人士，对证据的充分性和有效性进行评估，制定合适的诉讼策略，以提高诉讼的成功率。如果您还有其他关于土地纠纷方面的问题，欢迎随时向我咨询。