您有权拒绝厂方不合理的工作地点调动，但需根据具体情况采取不同应对策略。以下是具体分析和建议：
劳动合同是否明确约定工作地点
若合同中明确约定了具体工作地点（如“总厂”），且未约定“服从公司调动”等条款，则厂方单方面调动属于违约行为。您可明确拒绝，并要求继续履行原合同。若厂方以此为由解除合同，可能构成违法解除，您有权主张2N倍经济补偿金（N为工作年限）。
劳动合同是否约定“服从调动”条款
若合同中有“公司可根据经营需要调整工作地点”等类似条款，需进一步分析：
- 合理性判断：调动是否显著增加通勤成本（如跨市调动）、是否改变工作性质（如从技术岗调至体力岗）、是否带有惩罚性（如因您提出异议而调动）。若调动明显不合理，您仍可拒绝，并保留主张赔偿的权利。
- 协商空间：即使合同有约定，您也可与厂方协商补偿方案（如提供交通补贴、住宿支持），或要求签订补充协议明确调动期限。
厂方是否履行法定程序
根据《劳动合同法》第35条，变更劳动合同（包括工作地点）需双方协商一致并书面确认。若厂方未与您协商直接下发调动通知，您可书面拒绝并要求继续履行原合同。若厂方强制执行，您可向当地劳动监察大队投诉或申请劳动仲裁。
行动建议：
- 第一步：书面回复厂方，明确表示拒绝调动（保留邮件、短信等证据），并要求继续履行原合同。
- 第二步：若厂方坚持调动，收集证据（如劳动合同、调动通知、通勤成本证明等），向劳动仲裁委申请仲裁，主张继续履行合同或违法解除赔偿。
- 第三步：若调动未显著影响生活（如同城短距离调动），可考虑暂时接受，但要求厂方出具书面承诺（如调动期限、待遇不变），避免后续纠纷。
风险提示：
- 拒绝调动后，厂方可能以“旷工”等理由解除合同，需确保您未主动离职或违反厂规。
- 若合同无明确工作地点约定，仲裁或诉讼中可能需结合实际履行情况（如入职后一直在总厂工作）主张工作地点为总厂。
如有进一步细节（如调动距离、合同条款等），可随时向我补充，我会为您定制更具体的应对方案。