结论：工程停工120天，施工单位是否可以要求调离项目经理，并非直接由停工天数决定，而是需根据合同约定、项目经理职责履行情况及实际需求等多方面因素综合判断。

分析说明：

1. 合同约定：

   • 首先，应查阅施工单位与项目经理之间的聘用合同或项目管理合同，看其中是否有关于项目经理调离的具体条款。如果合同中明确规定了因工程停工达到一定天数可以调离项目经理，那么施工单位在符合条件时可以依据合同要求调离。
   • 若合同中没有明确规定，则需要考虑其他因素。

2. 项目经理职责履行情况：

   • 即使工程停工，项目经理仍可能负有管理现场、协调资源、保障安全等职责。如果项目经理在停工期间未能有效履行这些职责，或者存在失职行为，施工单位可能有理由要求调离。
   • 反之，如果项目经理在停工期间积极采取措施，如组织人员培训、进行设备维护等，以减少停工带来的损失，那么施工单位可能没有充分的理由要求调离。

3. 实际需求：

   • 施工单位应考虑调离项目经理的实际需求。如果停工是暂时的，且预计很快将复工，那么调离项目经理可能不是最佳选择，因为这可能导致复工时项目管理出现断层。
   • 如果停工是长期的，或者施工单位认为项目经理无法胜任后续工作，那么调离项目经理可能是合理的。

4. 法律程序与合规性：

   • 在决定调离项目经理前，施工单位应确保遵循所有相关的法律程序和公司内部规定，如提前通知、协商、办理离职手续等。
   • 如果项目经理是公司员工，调离可能涉及劳动法的相关规定，如解除劳动合同的条件、经济补偿等。施工单位应确保调离行为符合劳动法的规定，以避免法律纠纷。

建议与行动：

• 审查合同：施工单位应首先审查与项目经理的合同，了解其中关于调离的具体条款和条件。
• 评估项目经理表现：对项目经理在停工期间的表现进行评估，看其是否履行了应尽的职责。
• 考虑实际需求：根据工程的实际情况和复工计划，考虑调离项目经理的必要性和可行性。
• 遵循法律程序：如果决定调离项目经理，应确保遵循所有相关的法律程序和公司内部规定，以避免法律纠纷。

后续思考：

• 如果施工单位决定调离项目经理，应提前与项目经理进行沟通，解释调离的原因和依据，以减少不必要的矛盾和纠纷。
• 施工单位应考虑如何平稳过渡项目管理职责，确保工程的顺利进行和复工后的有效管理。

如有任何进一步的问题或需要更具体的法律建议，请直接向我咨询，费文文律师将竭诚为您服务。