针对“现场无监理不按图施工责任怎么办”的问题，核心结论在于明确责任主体并依法追究其责任，同时采取补救措施减少损失。以下从多个角度详细分析：
一、责任主体的确定
施工单位责任：
- 直接责任：施工单位作为施工活动的直接执行者，有义务按照设计图纸和施工规范进行施工。若施工单位未按照图纸施工，无论现场是否有监理，施工单位均应承担直接责任。
- 违约责任：若施工单位与建设单位（业主）签订的施工合同中明确规定了按图施工的义务，施工单位未履行该义务则构成违约，应承担违约责任，包括但不限于继续履行、采取补救措施或赔偿损失等。
监理单位责任（若存在）：
- 监督责任：监理单位受建设单位委托，对施工活动进行监督和管理。若监理单位未履行其监督职责，导致施工单位不按图施工，监理单位应承担相应的监督失职责任。
- 连带责任：在特定情况下，如监理单位与施工单位串通或明知施工单位不按图施工而未制止，监理单位可能需与施工单位承担连带责任。但本题中现场无监理，故监理单位不直接承担此次责任。
建设单位责任：
- 管理责任：建设单位作为工程项目的发起人和组织者，有义务确保施工活动的顺利进行。若建设单位未聘请监理单位或未对施工活动进行有效管理，导致施工单位不按图施工，建设单位可能需承担一定的管理责任。但此责任通常较轻，且需根据具体情况判断。
二、责任追究与补救措施
责任追究：
- 收集证据：首先，应收集相关证据，包括施工图纸、现场照片、施工记录、证人证言等，以证明施工单位未按照图纸施工的事实。
- 协商解决：在证据充分的情况下，可以与施工单位进行协商，要求其承担责任并采取补救措施。
- 法律途径：若协商无果，可以向建设行政主管部门投诉或提起诉讼，通过法律途径追究施工单位的责任。
补救措施：
- 整改施工：要求施工单位立即停止不按图施工的行为，并按照设计图纸进行整改。
- 赔偿损失：若因不按图施工导致工程质量问题或工期延误等损失，应要求施工单位承担赔偿责任。
- 加强监管：在后续施工过程中，应加强对施工活动的监管，确保施工单位严格按照设计图纸和施工规范进行施工。
三、法律依据
《中华人民共和国建筑法》：
- 第五十八条：建筑施工企业对工程的施工质量负责。建筑施工企业必须按照工程设计图纸和施工技术标准施工，不得偷工减料。工程设计的修改由原设计单位负责，建筑施工企业不得擅自修改工程设计。
- 第七十四条：建筑施工企业在施工中偷工减料的，使用不合格的建筑材料、建筑构配件和设备的，或者有其他不按照工程设计图纸或者施工技术标准施工的行为的，责令改正，处以罚款；情节严重的，责令停业整顿，降低资质等级或者吊销资质证书；造成建筑工程质量不符合规定的质量标准的，负责返工、修理，并赔偿因此造成的损失；构成犯罪的，依法追究刑事责任。
《中华人民共和国民法典》：
- 第五百七十七条：当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。
在实际操作中，建议根据具体情况咨询专业律师，以便更准确地确定责任主体和追究责任的方式。若您有任何法律问题，可以直接向我咨询，我会根据您的具体情况提供详细的法律建议。