结论：厂房作为您的财产，在租赁给他人后，您并不能随时要回来。是否可以收回厂房，主要取决于租赁合同的约定以及相关法律法规的规定。
分析说明：
租赁合同约定：
- 租赁合同是双方意思表示一致的产物，具有法律约束力。合同中通常会明确约定租赁期限、租金支付方式、租赁物的使用和返还等条款。
- 如果租赁合同中明确约定了租赁期限，且该期限尚未届满，那么您作为出租人，在租赁期限内是无权单方面要求承租人返还厂房的，除非承租人存在违约行为或双方协商一致提前终止合同。
法律法规规定：
- 根据《中华人民共和国民法典》的相关规定，租赁期限届满，承租人应当返还租赁物。返还的租赁物应当符合按照约定或者根据租赁物的性质使用后的状态。
- 如果租赁期限尚未届满，但承租人存在严重违约行为（如拖欠租金、擅自改变厂房结构等），您作为出租人有权依据合同约定和法律规定解除租赁合同，并要求承租人返还厂房。
- 另外，如果因不可抗力或其他法定事由导致租赁合同无法继续履行，双方也可以协商解除合同，并处理厂房的返还问题。
特殊场景：
- 如果租赁合同中没有明确约定租赁期限，或者约定为不定期租赁，那么根据法律规定，您作为出租人可以随时解除合同，但应当在合理期限之前通知承租人。
- 如果承租人未经您同意，擅自将厂房转租给第三人，您也有权解除合同并要求承租人返还厂房。
行动建议：
- 审查租赁合同：首先，您需要仔细审查与承租人签订的租赁合同，了解合同中关于租赁期限、租金支付、租赁物返还等条款的约定。
- 与承租人协商：如果租赁期限尚未届满，但您确实需要收回厂房，可以尝试与承租人进行协商，看是否能够达成一致意见提前终止合同。
- 依法维权：如果承租人存在违约行为或拒绝返还厂房，您可以依据合同约定和法律规定，通过法律途径维护自己的合法权益，如向法院提起诉讼或申请仲裁等。
后续思考依据：
在处理厂房租赁纠纷时，除了考虑租赁合同的约定和法律法规的规定外，还需要考虑实际情况和双方当事人的利益平衡。因此，在采取任何行动之前，建议您先咨询专业律师的意见，以确保自己的权益得到充分保障。如果您有任何关于房产租赁的法律问题或需要进一步的法律帮助，请随时向我咨询。