在面临工厂搬迁并要求工人去新地点工作的情况下，工人是否有权拒绝，这主要取决于劳动合同中的相关约定、调岗的合理性以及对工人造成的具体影响。以下是对此问题的详细解答：
可以拒绝的情形
劳动合同明确约定：
- 根据《中华人民共和国劳动合同法》的相关规定，如果劳动合同中明确约定了工作地点和岗位，那么工厂搬迁并调动岗位就属于变更劳动合同的主要内容。这种情况下，工厂需要与劳动者协商一致，并采用书面形式进行变更。如果未经协商一致，劳动者有权拒绝调岗。
调岗对员工造成重大不利影响：
- 如果工厂搬迁导致工人的通勤时间大幅增加、新岗位的技能要求与工人能力严重不匹配、薪资待遇明显降低等，对工人造成了明显的不利影响，那么工人可以拒绝调岗。如果工厂因此解除劳动合同，还需要根据相关法律规定支付经济补偿。
可能无法拒绝的情形
劳动合同约定具有灵活性：
- 如果劳动合同中已经明确用人单位有权根据生产经营需要调整工作地点和岗位，并且这种调动是合理的（比如是小范围搬迁、工作内容相近、薪资待遇不变或提高），那么工人可能无法拒绝调动。
调动岗位具有充分合理性：
- 在某些特殊情况下，比如由于政府规划要求、不可抗力等客观原因导致工厂搬迁，并且用人单位已经采取了合理的弥补措施（比如提供交通补贴、调整工作时间）以降低对工人的影响，那么调动岗位是为了维持企业的正常生产经营，工人拒绝调动可能缺乏法律依据。
建议与指导
- 查看劳动合同：在面对工厂搬迁及岗位调动时，工人应首先仔细查看劳动合同中的相关约定，了解自己的权利和义务。
- 与用人单位沟通：如果对调岗有异议，工人应及时与用人单位进行沟通，尝试通过协商达成一致意见。
- 寻求法律帮助：如果协商无果，并且工人认为调岗对自己造成了重大不利影响，那么可以寻求专业律师的帮助，通过法律途径来维护自己的合法权益。
综上所述，工人在面对工厂搬迁及岗位调动时，应根据劳动合同的具体内容、调岗的合理性以及对自身的影响来综合判断是否有权拒绝。在做出决定前，建议咨询专业律师以获取更准确的法律意见。