将一些部门搬到工厂是否违法，不能一概而论，需要分情况讨论：

1. 如果搬迁行为符合劳动合同和相关法律规定：

   • 劳动合同中如果明确约定了工作地点可能包括工厂或其他相关地点，或者双方通过协商一致同意将部门搬迁至工厂，且搬迁没有给员工带来实质性的不利影响（如通勤时间大幅增加、工作环境显著恶化等），那么这种搬迁行为通常是合法的。
   • 在这种情况下，员工应当配合公司的搬迁安排，否则可能构成违反劳动合同或公司规章制度的行为。

2. 如果搬迁行为违反劳动合同或相关法律规定：

   • 如果劳动合同中明确约定了工作地点，且该地点不包括工厂，或者公司未经员工同意单方面决定将部门搬迁至工厂，且这种搬迁给员工带来了实质性的不利影响，那么这种搬迁行为可能是违法的。
   • 在这种情况下，员工有权拒绝搬迁，并可以依据《劳动合同法》等相关法律规定，要求公司支付经济补偿金或采取其他补救措施。具体来说，如果公司因此解除与员工的劳动合同，员工可以要求公司按照工作年限支付经济补偿金，每满一年支付一个月工资的标准向劳动者支付。六个月以上不满一年的，按一年计算；不满六个月的，向劳动者支付半个月工资的经济补偿。

3. 特殊情况下的搬迁：

   • 如果公司因生产经营需要必须进行搬迁，且这种搬迁是出于合理和必要的考虑（如政策调整、市场变化等），但确实给员工带来了不利影响，公司应当与员工进行充分协商，并尽可能提供必要的补偿或协助（如提供交通补贴、调整工作时间等）。
   • 如果双方无法就搬迁事宜达成一致，公司不能单方面强制搬迁或解除劳动合同，否则可能面临法律责任。

法律建议：

• 对于员工而言，如果面临公司搬迁的情况，首先应当仔细审查劳动合同中的相关条款，了解自己的权利和义务。
• 如果认为公司的搬迁行为违法或不合理，可以与公司进行协商，要求公司提供合理的补偿或解决方案。
• 如果协商无果，可以向当地的劳动监察部门投诉或申请劳动仲裁，以维护自己的合法权益。

可能法律后果：

• 如果公司违法搬迁或解除劳动合同，可能面临支付经济补偿金、赔偿金等法律责任。
• 员工如果拒绝合法搬迁或采取不当方式维权，也可能面临违反劳动合同或公司规章制度的风险。

总之，将一些部门搬到工厂是否违法取决于多种因素，包括劳动合同的约定、搬迁的合理性、对员工的影响等。如果有任何疑问或需要进一步的法律帮助，可以直接向我咨询。