工程负责人在以下关键阶段和特定情形下通常不能擅自离开工程现场：

1. 施工关键期：

   • 基础施工阶段：如地基处理、桩基施工等，这些阶段对工程质量影响重大，工程负责人需现场监督，确保施工符合设计要求，防止因施工不当导致的质量问题。
   • 主体结构施工期：如混凝土浇筑、钢结构安装等，这些环节直接关系到建筑物的结构安全，工程负责人需在场指导，及时解决施工中的技术难题。
   • 隐蔽工程验收前：隐蔽工程（如管线铺设、防水处理等）一旦完成，后续难以检查，工程负责人需在验收前进行细致检查，确保质量合格。

2. 质量安全检查与整改期：

   • 质量检查时：当工程进行质量检查（如分部分项工程验收、竣工验收等）时，工程负责人需在场配合，提供必要的技术资料，解释施工过程中的疑问。
   • 安全隐患整改期：若工程存在安全隐患或质量问题，工程负责人需组织整改，并在整改期间现场监督，确保整改措施得到有效执行。

3. 特殊天气或紧急情况应对期：

   • 恶劣天气（如暴雨、大风、高温等）：这些天气条件可能对施工安全和质量造成严重影响，工程负责人需在场指挥，采取必要的防护措施。
   • 紧急情况（如火灾、坍塌等）：在发生紧急情况时，工程负责人需迅速组织救援，协调各方资源，减少损失，并配合相关部门进行事故调查。

4. 合同或法规要求的特定时段：

   • 合同约定的关键节点：若施工合同中明确规定了工程负责人在特定时段（如关键工序施工、重要设备安装等）必须在场，则工程负责人需遵守合同约定。
   • 法规要求的现场管理期：根据相关法律法规（如《建设工程安全生产管理条例》等），工程负责人在某些特定时段（如施工高峰期、危险作业期等）需现场管理，确保施工安全。

法律后果与建议：

• 若工程负责人在上述关键阶段或特定情形下擅自离开工程现场，可能构成违约或违法行为，需承担相应的法律责任（如赔偿损失、接受行政处罚等）。
• 建议：工程负责人应合理安排工作时间，确保在关键阶段和特定情形下能够现场监督和管理。若因特殊原因需暂时离开，应提前安排好替代人员，并确保替代人员具备相应的资质和能力。同时，工程负责人应加强与业主、监理等各方的沟通，及时报告工程进展和存在的问题，共同推动工程顺利进行。

如有更多关于建设工程领域的法律问题，可以直接向我咨询。