结论：在没有签订书面合同的情况下，您想收回出租给他人用于建厂的土地，是有可能的，但具体能否成功收回以及收回的方式和可能面临的法律后果，需根据实际情况和法律规定来判断。以下是从不同角度的详细分析：
一、合同形式与法律效力
口头合同的有效性：
- 根据《民法典》的相关规定，当事人订立合同，可以采用书面形式、口头形式或者其他形式。因此，即使您与承租人没有签订书面合同，口头合同也是具有法律效力的。
- 然而，口头合同在证明其存在和内容方面存在困难，一旦发生纠纷，双方可能难以就合同的具体条款达成一致。
书面合同的重要性：
- 书面合同能够明确双方的权利和义务，减少纠纷的发生。在没有书面合同的情况下，您需要依靠其他证据（如证人证言、转账记录、通信记录等）来证明租赁关系的存在和具体内容。
二、收回土地的可能性与方式
协商收回：
- 您首先可以尝试与承租人进行协商，看是否能够达成一致意见，和平收回土地。这是最为理想且成本最低的方式。
- 在协商过程中，您可以明确表达收回土地的原因和意愿，并听取承租人的意见和诉求，寻求双方都能接受的解决方案。
法律途径收回：
- 如果协商无果，您可以考虑通过法律途径来收回土地。这通常涉及提起诉讼或申请仲裁。
- 在提起诉讼或申请仲裁前，您需要收集足够的证据来证明租赁关系的存在、租赁期限、租金支付情况等关键信息。这些证据将对于法院或仲裁机构的裁决至关重要。
- 法院或仲裁机构将根据双方提供的证据和法律规定来裁决是否支持您的收回请求。如果裁决支持您，承租人将需要按照裁决结果返还土地。
三、可能面临的法律后果
如果承租人不同意收回：
- 如果承租人不同意收回土地，并且您无法通过协商或法律途径解决纠纷，那么您可能需要考虑接受现状或寻求其他补偿方式。
- 在某些情况下，如果承租人已经对土地进行了大量投资或建设，法院或仲裁机构可能会考虑这些因素，并可能要求您给予一定的补偿。
如果承租人存在违约行为：
- 如果承租人在租赁期间存在违约行为（如未按时支付租金、擅自改变土地用途等），您有权根据法律规定和合同约定（如果有的话）要求承租人承担违约责任，并可能因此获得收回土地的理由。
四、建议与注意事项
收集证据：
- 在尝试收回土地之前，请务必收集足够的证据来证明租赁关系的存在和具体内容。这些证据可能包括证人证言、转账记录、通信记录、照片或视频等。
咨询专业律师：
- 由于土地租赁纠纷可能涉及复杂的法律问题和证据收集，建议您在采取任何行动之前咨询专业律师的意见。律师可以根据您的具体情况提供针对性的法律建议和策略。
保持冷静与理性：
- 在处理土地租赁纠纷时，请保持冷静和理性。避免采取过激或违法的行为，以免加剧纠纷或给自己带来不必要的法律风险。
如果您有任何进一步的疑问或需要更具体的法律建议，请直接向我咨询。