在厂里被调来调去是否违法，需根据具体情况判断，一般情况下可能违法，但在特定条件下可能合法。以下是对此问题的详细分析：
一、合法的情况
劳动合同有约定：
- 若劳动合同中明确赋予了工厂根据生产经营需要合理调整岗位的权利，并且新岗位在工作内容、薪资待遇、工作条件等方面具有合理性，无侮辱性或惩罚性，那么工厂的调岗行为可能是合法的。
基于客观情况变化：
- 如因不可抗力、企业转产、重大技术革新或经营方式调整等客观情况变化，导致原岗位无法继续履行，且新岗位是合理安排，经与员工协商（或依据劳动合同约定无需协商），调岗亦可能合法。
员工不能胜任原岗位：
- 若员工不能胜任原工作，且经过培训或调整岗位后仍不能胜任，工厂有权根据实际情况调整其岗位。
二、违法的情况
未经员工同意的单方面调岗：
- 根据《中华人民共和国劳动合同法》第三十五条，用人单位与劳动者协商一致方可变更劳动合同内容，包括工作岗位。因此，未经员工同意，工厂单方面调岗通常违反法律规定。
调岗缺乏合理性：
- 如恶意调岗，将员工调到与其专业技能、工作经验完全不匹配的岗位，或者通过调岗大幅降低员工工资待遇，且无合理依据，这种调岗行为可能构成违法。
未履行法定程序：
- 工厂在调岗前未与员工进行充分协商，未听取并合理解释员工的意见和建议，或者规章制度未经过民主程序制定或未向员工公示，即以员工不服从调岗为由进行处罚或辞退，这种行为也可能构成违法。
三、员工权益保护及应对措施
- 了解自身权益：员工应了解自己的劳动合同内容，特别是关于岗位调整、薪资待遇等关键条款，以便在调岗时能够判断工厂的行为是否合法。
- 沟通协商：面对调岗，员工应首先与工厂进行沟通，表达自己的立场和诉求，并尝试寻求双方都能接受的解决方案。
- 收集证据：员工应保存原岗位工作相关材料，如工作成果、业绩考核、工作邮件等，以证明在原岗位的工作表现；同时收集调岗通知的相关文件，包括书面通知、邮件、聊天记录等，作为维权的证据。
- 法律途径维权：若沟通无果，员工可向当地劳动争议仲裁委员会申请仲裁，要求恢复原岗位或获得经济补偿；对仲裁结果不满的，可进一步向人民法院提起诉讼，依法维护自身权益。
总结来看，工厂调岗是否违法需综合考虑劳动合同约定、调动的合理性、法定程序的履行以及对劳动者权益的影响。员工在面对此类情况时，应了解自身权益，积极与工厂沟通，并准备好必要的证据，以便在必要时通过法律途径维护自己的合法权益。如果有任何疑问或需要进一步的法律帮助，可以直接向我咨询。