结论：如果你已经与工厂就搬迁事宜签订了合同但之后不想去新地点工作，首先需要检查合同中是否有关于地点变更或解约的条款。若无此类条款且你单方面违约，可能会面临一定的法律责任。以下是从不同角度为你进行的分析和建议：
一、合同性质及法律后果
劳动合同变更合同：
- 如果这份合同是变更原劳动合同中的工作地点条款，那么签署后即表示你同意了工作地点的变更。若你反悔不去新地点，可能被视为违反合同约定。
- 法律后果：工厂有权依据合法且经过民主程序制定并公示的规章制度对你进行处罚，如警告、记过等。情节严重时，工厂可能根据《劳动合同法》的相关规定解除与你的劳动合同，且无需支付经济补偿。
搬迁补偿合同：
- 如果合同中包含工厂给予的经济补偿以换取你随迁的承诺，而你在领取补偿后拒绝前往新地点，则构成违约。
- 法律后果：工厂可以要求你返还补偿款项，并通过法律途径追究你的违约责任。法院可能判决你返还全部或部分补偿费用，并承担工厂因你违约而产生的损失。
二、可以反悔的特殊情形
- 合同存在可撤销情形：
- 如果签订合同时存在欺诈、胁迫、重大误解、显失公平等情况，你可以在知道或应当知道撤销事由之日起一年内向法院或仲裁机构申请撤销合同。
- 一旦合同被撤销，即失去法律约束力，你无需履行合同。
三、应对建议
友好协商：
- 首先尝试与工厂进行友好协商，探讨可能的解决方案，如调整岗位、远程办公或协商解约。在协商过程中，你可以表达自己的困难和顾虑，寻求工厂的理解和支持。
审查合同条款：
- 仔细审查合同条款，特别是关于工作地点变更、解约和违约责任的部分。如果合同中存在不明确或模糊的条款，你可以与工厂进行进一步沟通，明确双方的权利和义务。
考虑法律后果：
- 在决定是否反悔前，务必考虑清楚可能面临的法律后果。如果违约成本较高，且你无法承担相应的责任，那么建议谨慎行事。
寻求法律帮助：
- 如果你认为合同存在可撤销的情形，或者对合同条款有疑问，可以寻求我的帮助。我可以对合同进行详细分析，并为你提供针对性的法律建议。
准备法律途径：
- 如果协商无果，且你认为自己的权益受到侵害，可以考虑通过法律途径维护自己的权益。这包括提起诉讼或申请仲裁等。
四、法律依据
- 根据《中华人民共和国劳动合同法》的相关规定，当劳动合同订立时所依据的客观情况发生重大变化，导致合同无法履行时，用人单位与劳动者可以协商变更劳动合同内容。如果协商不成，用人单位可以解除劳动合同，但需要支付经济补偿。然而，这一规定并不适用于你单方面违约的情况。
- 如果合同中存在欺诈、胁迫等情形，你可以根据《中华人民共和国民法典》的相关规定申请撤销合同。
在处理此类问题时，务必保持冷静和理性，依法维护自己的合法权益。如果你有任何疑问或需要进一步的法律帮助，请随时向我咨询。