针对您提出的“违法建设的工厂不知道买了合同怎么办”这一问题，我的结论是：您需要先明确合同的具体内容、购买时的知情情况以及违法建设工厂的法律状态，再据此采取相应的法律措施。以下是我从不同角度为您详细分析的情况：

1. 合同效力问题：

   • 若合同明确涉及违法建设工厂的买卖：根据《民法典》的相关规定，违反法律、行政法规的强制性规定的民事法律行为无效。因此，如果合同中明确约定了违法建设工厂的买卖，该合同很可能因违反法律法规而无效。您有权要求解除合同，并可能根据实际情况要求对方承担违约责任或赔偿损失。
   • 若合同未明确提及违法建设，但您购买后发现：在这种情况下，您可能需要先确认合同的具体条款，特别是关于标的物的描述和保证条款。如果合同中没有明确提及工厂的合法性，但卖方在交易过程中存在隐瞒或欺诈行为，您可能有权依据《民法典》中关于欺诈或重大误解的规定，请求撤销合同或要求赔偿。

2. 违法建设工厂的法律后果：

   • 行政处罚：违法建设工厂可能面临行政处罚，如罚款、拆除等。这些处罚可能由相关部门直接对工厂的所有者或使用者执行。
   • 刑事责任：在极端情况下，如果违法建设行为构成犯罪（如非法占用农用地罪等），相关责任人可能面临刑事追究。

3. 您的应对策略：

   • 收集证据：首先，您需要收集所有与合同和工厂相关的证据，包括合同文本、交易记录、工厂的照片或视频、相关部门的通知或处罚决定等。
   • 咨询专业律师：鉴于情况的复杂性，我建议您尽快咨询专业律师，特别是擅长合同纠纷和房产领域的律师。律师将能够根据您的具体情况，提供针对性的法律建议和解决方案。
   • 考虑法律行动：根据律师的建议，您可能需要考虑采取法律行动，如起诉要求解除合同、撤销合同或要求赔偿等。同时，您也需要做好应对可能行政处罚或刑事责任的准备。

4. 预防措施：

   • 尽职调查：在未来进行类似交易时，务必进行充分的尽职调查，包括了解标的物的合法性、是否存在纠纷或法律风险等。
   • 明确合同条款：在签订合同时，务必明确约定标的物的描述、保证条款以及违约责任等，以降低交易风险。

最后，我建议您保持冷静，不要急于采取行动。在明确合同的具体内容和工厂的法律状态后，再根据律师的建议采取相应的法律措施。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。