结论：厂里以合同条款为由在您骨折病假后上班时调岗，这一行为不一定合法合理，您可以从以下方面应对。

1. 审查合同条款
   • 首先，仔细查看劳动合同中关于调岗的具体约定。如果合同中明确规定了调岗的条件、程序等内容，且此次调岗符合这些规定，那么从合同层面看，厂里可能有一定的依据。但即便如此，调岗也应当具有合理性，不能是随意、恶意的调岗。例如，合同约定因生产经营需要可以调岗，但厂里将您从技术岗位调到完全不相关且不需要任何技能的体力岗位，这就可能不合理。
   • 若合同中没有明确、具体且合理的调岗条款，厂里仅以模糊的合同条款为由进行调岗，那么这种调岗行为可能缺乏合法依据。
2. 考虑调岗的合理性
   • 从实际情况出发，评估调岗是否合理。合理的调岗通常应基于生产经营的客观需要，并且调岗后的工作岗位应与原岗位在工作内容、劳动强度、薪资待遇等方面具有相当性。比如，您原本从事的是办公室文职工作，因骨折病假后，厂里将您调到另一个部门的类似文职岗位，且薪资待遇不变，这种调岗相对合理。
   • 如果调岗后工作强度大幅增加，导致您身体无法承受（考虑到您刚病假结束，身体可能还未完全恢复），或者薪资待遇明显降低，那么这种调岗就是不合理的，您有权拒绝。
3. 与厂里沟通协商
   • 在面对调岗时，建议您先与厂里进行友好、理性的沟通协商。向厂里说明您对调岗的看法和担忧，例如调岗可能对您身体恢复造成的影响、调岗后工作的不适应性等。同时，也可以要求厂里提供调岗的详细理由和相关依据。
   • 在协商过程中，您可以提出自己的合理诉求，如希望继续留在原岗位工作，或者如果必须调岗，希望调整到一个更合适、合理的工作岗位，并且薪资待遇等方面保持不变或合理调整。
4. 寻求法律救济途径
   • 如果与厂里协商无果，且您认为厂里的调岗行为侵犯了您的合法权益，您可以向当地劳动监察部门投诉。劳动监察部门有权对用人单位的违法行为进行调查和处理，责令厂里改正违法行为。
   • 您也可以向劳动争议仲裁委员会申请仲裁。在仲裁过程中，您需要提供相关证据，如劳动合同、病假证明、与厂里沟通协商的记录等，以证明厂里的调岗行为不合法不合理，维护自己的合法权益。如果对仲裁结果不服，还可以向人民法院提起诉讼。