结论：在租赁合同中，若合同未明确约定乙方（承租方）不租时甲方（出租方）不得收回房屋，则甲方通常有权在乙方不履行租赁义务（如不支付租金）或租赁期满时收回房屋。但若合同中有特别约定，如“乙方不租时甲方不得收回”或类似条款，则甲方需遵守该约定，不得随意收回房屋。以下是对此问题的详细分析：
一、一般情况下的法律依据
《民法典》关于租赁合同的规定：
- 根据《民法典》的相关规定，租赁合同是出租人将租赁物交付承租人使用、收益，承租人支付租金的合同。
- 在租赁期间内，承租人有权按照约定使用租赁物，并支付租金。若承租人未按照约定支付租金或违反其他租赁义务，出租人有权解除合同并收回租赁物。
- 租赁期满，承租人应当返还租赁物。返还的租赁物应当符合按照约定或者根据租赁物的性质使用后的状态。
合同自由原则：
- 租赁合同的内容由当事人约定，包括租赁物的名称、数量、用途、租赁期限、租金及其支付期限和方式、租赁物维修等条款。
- 若合同中未明确约定“乙方不租时甲方不得收回”或类似条款，则甲方在乙方不履行租赁义务或租赁期满时有权收回房屋。
二、特殊情况下的约定
合同中的特别约定：
- 若租赁合同中明确约定了“乙方不租时甲方不得收回”或类似条款，则该条款对双方具有约束力。
- 在这种情况下，即使乙方不再租赁房屋，甲方也无权随意收回房屋，除非乙方存在严重违反合同约定的行为（如损坏房屋、拖欠租金等）且合同中有相应解除条款。
约定的解释与适用：
- 对于合同中的特别约定，应按照合同的目的、交易习惯以及诚实信用原则进行解释。
- 若约定存在歧义或不明确之处，双方应协商解决；协商不成的，可以依据相关法律规定或寻求司法途径解决。
三、法律建议
审查合同条款：
- 在签订租赁合同时，双方应仔细审查合同条款，确保合同内容明确、具体、无歧义。
- 特别关注关于租赁期限、租金支付、房屋返还以及违约责任等方面的条款。
保留证据：
- 在租赁期间内，双方应保留好与租赁相关的证据，如租金支付凭证、房屋使用状况记录等。
- 这些证据在发生纠纷时可能起到关键作用。
及时沟通协商：
- 若在租赁期间内出现任何问题或纠纷，双方应及时沟通协商，寻求解决方案。
- 通过友好协商解决纠纷可以节省时间和成本，并维护双方的合作关系。
寻求法律帮助：
- 若双方无法协商解决纠纷，可以寻求法律帮助，如咨询专业律师或向法院提起诉讼。
- 律师可以根据具体情况提供法律意见和解决方案，帮助双方维护自身权益。
四、可能的法律后果
若甲方违反约定收回房屋：
- 若合同中有特别约定且甲方违反该约定收回房屋，甲方可能构成违约行为。
- 乙方有权要求甲方继续履行合同、赔偿损失或承担其他违约责任。
若乙方违反租赁义务：
- 若乙方未按照约定支付租金或违反其他租赁义务，甲方有权解除合同并收回房屋。
- 乙方可能需承担违约责任，如支付违约金、赔偿损失等。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。