针对您提出的“工龄20年工厂搬迁工人不愿意去该怎样赔偿”的问题，以下是我根据《中华人民共和国劳动合同法》及相关规定，为您提供的详细解答：

一、总体原则

在工厂搬迁的情况下，若员工因不愿随迁而选择解除劳动关系，其赔偿金额主要根据员工在本单位的工作年限以及工资水平来确定。同时，需考虑工厂搬迁是否导致劳动合同订立时所依据的客观情况发生重大变化，且无法继续履行。

二、具体赔偿情形

1. 工厂在本市内搬迁

   • 员工选择跟随搬迁：劳动关系继续存续，工厂无需支付经济补偿。
   • 员工不愿跟随搬迁：
     • 若工厂未提供必要的交通补贴或通勤保障等，导致员工工作不便，且被认定为未按照劳动合同约定提供劳动条件，员工因此解除劳动合同的，工厂应当支付经济补偿。
     • 经济补偿计算标准：按劳动者在本单位工作的年限，每满一年支付一个月工资；六个月以上不满一年的，按一年计算；不满六个月的，支付半个月工资的经济补偿。月工资指劳动合同解除或终止前十二个月的平均工资。
     • 对于有20年工龄的员工，若其月工资未高于当地职工月平均工资三倍，则经济补偿为20个月工资；若月工资高于当地职工月平均工资三倍，则按三倍数额支付，但最高不超过12年（即最多支付12个月的三倍工资作为经济补偿）。

2. 工厂跨市搬迁

   • 员工选择跟随搬迁：劳动关系继续存在，工厂应给予员工因搬迁产生的合理费用（如交通费用、搬家费用等）适当的补贴或补偿。
   • 员工不愿跟随搬迁：
     • 属于劳动合同订立时的客观情况发生重大变化，致使劳动合同无法履行的情形。
     • 若工厂与员工未能就变更劳动合同内容达成协议，工厂应提前三十日以书面形式通知员工或额外支付一个月工资后解除劳动合同，并支付经济补偿金。
     • 经济补偿金的计算标准与上述本市内搬迁中工厂存在不合理情况时相同。

三、特殊情况处理

• 合理安置措施：若工厂能通过提供班车、交通补贴等合理措施确保劳动合同的继续履行，则可能无需支付经济补偿。
• 协商解除：工厂可与员工协商解除劳动合同并支付经济补偿，具体金额由双方协商确定。

四、法律途径与救济

• 若工厂拒绝支付相应的经济补偿，员工应先与公司协商解决。
• 协商不成的，可向劳动争议仲裁委员会申请仲裁。
• 对仲裁裁决不服的，还可向人民法院提起诉讼以维护自身合法权益。

五、总结与建议

对于工龄20年的员工，在工厂搬迁且不愿随迁的情况下，其经济补偿主要根据工作年限和工资水平来确定。若月工资未高于当地职工月平均工资三倍，则经济补偿为工作年限对应的月数工资；若月工资高于三倍，则按三倍数额支付，但最高不超过12年。建议您在处理此类问题时，先与工厂进行协商，若协商不成，可依法通过劳动争议仲裁或诉讼途径来维护自身权益。