施工单位施工现场项目负责人不在现场，可能会承担多方面的责任，具体如下：
行政责任：
- 根据《江苏省房屋建筑和市政基础设施工程质量监督管理办法》等相关规定，项目经理擅自变更离岗或未按照规定配备相应的工程项目管理人员的，由住房和城乡建设行政主管部门责令改正，并可处5000元以上3万元以下罚款。这一规定明确了项目负责人不在现场可能面临的行政处罚。
- 此外，若项目负责人长期未到岗履职，导致项目存在安全生产隐患或质量隐患，相关部门还可能根据具体情况对项目负责人个人处以罚款，并对施工企业扣除诚信分。
民事责任：
- 项目负责人作为施工单位的管理者，对项目的安全生产和工程质量负有全面责任。若因项目负责人不在现场导致项目出现质量问题或安全事故，造成人员伤亡或财产损失，施工单位及其项目负责人可能需要承担相应的民事赔偿责任。
- 民事赔偿责任的范围可能包括医疗费用、伤残赔偿、财产损失等，具体数额需根据事故造成的实际损失和法律规定来确定。
刑事责任（在极端情况下）：
- 虽然项目负责人不在现场本身不直接构成犯罪，但若因此导致重大伤亡事故或造成严重后果，可能构成重大责任事故罪等犯罪。
- 根据《中华人民共和国刑法》的相关规定，发生重大伤亡事故或造成严重后果的，可能面临三年以下有期徒刑或者拘役的刑罚；情节特别恶劣的，刑罚将加重至三年以上七年以下有期徒刑。
法律背景与建议：
- 项目负责人是负责建设项目的管理者，其长期缺席意味着项目处于脱管状态，不仅影响项目质量、安全、工程进度，也存在一定的社会危害性。因此，法律对项目负责人的到岗履职有严格要求。
- 为避免上述法律后果，施工单位应确保项目负责人按时到岗履职，并建立健全的项目管理制度和安全生产责任制。同时，项目负责人也应增强法律意识和责任意识，认真履行自己的职责。
实际案例警示：
- 近期有案例显示，某项目负责人从2023年二季度开始长期未到岗履职，导致项目存在脚手架底部积水、内防护不到位、高处作业安全防护措施不规范等安全生产隐患及模板支架缺横向、斜向拉杆等质量隐患。最终，该项目负责人被处以罚款，施工企业也被扣除诚信分。这一案例再次强调了项目负责人到岗履职的重要性。
总结与提醒：
- 施工单位施工现场项目负责人不在现场可能面临行政责任、民事责任乃至刑事责任。因此，务必确保项目负责人按时到岗履职，以保障项目的顺利进行和人员的生命安全。
- 若您在建设工程领域遇到任何法律问题或需要进一步的法律建议，请随时向我咨询。我将根据您的具体情况提供全面、专业的法律服务。