当施工单位不进行施工管理时，建设单位、监理单位以及政府监管部门均可依据相关法律法规和合同条款采取一系列措施来应对，以保障工程安全、质量及各方权益。以下是从不同角度给出的具体分析和建议：

一、建设单位与监理单位层面

1. 立即制止与沟通

   • 一旦发现施工单位不进行施工管理，建设单位和监理单位应立即要求其停止违规行为，并与施工单位进行沟通，明确指出问题所在，要求其立即整改。

2. 发出书面整改通知

   • 以书面形式向施工单位发出整改通知，详细列出问题点、违反的条款以及整改的期限和要求。整改通知应具体、明确，确保施工单位了解整改的方向和重点。

3. 加强监督与检查

   • 在整改期间，建设单位和监理单位应加强对施工单位的监督和检查，定期到现场查看整改情况，确保施工单位按时、按质完成整改任务。

4. 采取进一步措施

   • 若施工单位拒不整改或整改不力，建设单位可根据合同约定采取扣除工程款、解除合同等措施；监理单位则可向上级主管部门报告，请求政府介入处理。

二、政府监管部门层面

1. 责令停工整改

   • 政府监管部门在接到报告或检查发现施工单位不进行施工管理后，有权责令施工单位立即停工整改，以保障工程的安全和质量。

2. 行政处罚

   • 根据相关法律法规，政府监管部门可对施工单位进行罚款、暂扣或吊销资质证书、责令停业整顿等行政处罚。例如，依据《建设工程安全生产管理条例》，对于未履行施工管理职责的施工单位，政府监管部门可依法进行处罚。

3. 记入信用档案

   • 政府监管部门还可将施工单位的不作为行为记入企业信用档案，影响其市场信誉和未来业务承接。这将对施工单位的长期发展产生不利影响。

三、后续责任追究层面

1. 民事赔偿责任

   • 若因施工单位不进行施工管理导致工程质量问题或给建设单位、第三方造成损失的，施工单位应承担民事赔偿责任。建设单位可通过协商或诉讼方式要求施工单位进行赔偿。

2. 刑事责任

   • 在极端情况下，若施工单位的不作为行为引发重大安全事故，造成人员伤亡或重大财产损失的，相关责任人员可能面临刑事处罚，如重大责任事故罪等。

四、综合建议

• 加强沟通与协作：建设单位、监理单位与施工单位之间应加强沟通与协作，共同确保施工管理的顺利进行。在发现问题时，应及时沟通并共同寻找解决方案。
• 完善合同条款：在签订施工合同时，应明确约定施工单位的施工管理职责和违约责任。这样，在出现问题时，建设单位可以依据合同条款要求施工单位承担相应的责任。
• 收集证据材料：在采取措施前，建设单位和监理单位应收集充分的证据材料，如施工记录、现场照片、视频等，以支持后续的主张和投诉。
• 强化安全意识：在处理施工单位不进行施工管理的问题时，各方应强化安全意识，确保在处理过程中不会因施工单位的违规行为而遭受伤害。

若您遇到施工单位不进行施工管理的问题，可以直接向我咨询，我会根据您的具体情况提供更详细的法律建议和解决方案。