结论：您可以根据具体情况选择拒绝或接受岗位调整，但需综合考虑劳动合同约定、公司规章制度及法律规定，谨慎做出决定。以下从不同角度为您详细分析：

1. 劳动合同的约定

   • 岗位明确性：若劳动合同中明确约定了您的工作岗位为操作工，且未提及公司有权单方面调整岗位，则公司未经您同意，擅自将您从物料岗位调整回操作工岗位，可能构成违约。您有权依据劳动合同的约定，拒绝公司的调整要求。
   • 岗位调整条款：若劳动合同中包含公司有权根据工作需要调整员工岗位的条款，且该条款不违反法律法规的强制性规定，则公司调整您的岗位可能具有一定的合法性。但即便如此，公司也应与您协商一致，并考虑您的专业技能、身体状况等因素，确保调整的合理性。

2. 公司规章制度

   • 规章制度合法性：若公司规章制度中明确规定了岗位调整的程序和条件，且该规章制度经过民主程序制定、公示并告知您，则公司调整您的岗位可能需遵循这些规定。若公司未按照规章制度执行，您有权拒绝不合理的调整。
   • 规章制度合理性：即使公司规章制度规定了岗位调整，但调整决定若明显不合理，如将您从相对轻松的物料岗位调整至繁重的操作工岗位，且未提供相应补偿或调整原因不合理，您同样有权拒绝。

3. 法律规定

   • 劳动合同变更：根据《劳动合同法》的相关规定，用人单位与劳动者协商一致，可以变更劳动合同约定的内容。岗位调整属于劳动合同内容的变更，因此应经双方协商一致。若公司未经您同意擅自调整岗位，您有权拒绝，并可要求公司继续履行原劳动合同或支付经济补偿。
   • 特殊情形下的岗位调整：在某些特殊情形下，如员工不胜任工作、医疗期满后不能从事原工作等，公司有权根据法律规定调整员工岗位。但这些情形均有严格的法律条件和程序要求，公司需举证证明调整的合理性。

建议：

• 与公司沟通：首先，建议您与公司进行沟通，了解公司调整岗位的具体原因和依据。若公司能够提供合理的解释和依据，且调整对您的工作和生活影响不大，您可以考虑接受调整。
• 拒绝不合理调整：若公司无法提供合理的解释和依据，或调整对您的工作和生活造成较大影响，您有权拒绝公司的调整要求。同时，您可以要求公司继续履行原劳动合同或支付经济补偿。
• 寻求法律援助：若您与公司无法就岗位调整问题达成一致，且您认为公司的调整行为侵犯了您的合法权益，您可以向当地劳动争议仲裁委员会申请仲裁或向人民法院提起诉讼，寻求法律援助。

可能后果：

• 若您拒绝合理调整：若公司的岗位调整具有合法性和合理性，且您拒绝接受调整，公司可能依据规章制度或劳动合同约定对您进行处理，如警告、记过、解除劳动合同等。但公司需确保处理决定的合法性和合理性。
• 若公司违法调整：若公司的岗位调整违反法律法规或劳动合同约定，您有权拒绝并要求公司承担相应法律责任。如公司因此解除劳动合同，您有权要求公司支付经济补偿或赔偿金。