在严禁施工的时间进行施工，责任主要由施工单位承担，但具体责任划分还需根据实际情况和具体原因来确定。以下是从不同角度对这一问题的详细分析：
违反施工时间规定的责任：
- 通常情况下，各地政府或相关部门会制定具体的施工时间规定，以保障居民的正常生活和休息。如果施工单位在严禁施工的时间段内进行施工，这明显违反了相关规定。
- 在这种情况下，施工单位可能会面临行政处罚，如罚款、停工整顿等。同时，如果施工行为对周边居民造成了实际损害，如噪声干扰、环境污染等，施工单位还可能需要承担民事赔偿责任。
因特殊原因需在严禁施工时间施工的责任：
- 在某些特殊情况下，如抢险救灾、紧急维修等，施工单位可能需要在严禁施工的时间段内进行施工。这种情况下，施工单位通常需要提前向相关部门申请并获得批准。
- 如果施工单位能够证明其施工行为是出于特殊原因，并且已经获得了相关部门的批准，那么其责任可能会相对减轻或免除。但即便如此，施工单位仍需采取必要的措施，尽量减少对周边居民的影响。
施工行为对周边居民造成损害的责任：
- 如果施工单位在严禁施工的时间段内进行施工，并且其行为对周边居民造成了实际损害，如噪声干扰导致居民无法休息、环境污染影响居民健康等，那么施工单位需要承担相应的民事赔偿责任。
- 居民有权要求施工单位停止侵害、排除妨碍、赔偿损失等。如果双方无法达成一致，居民还可以通过法律途径来维护自己的合法权益。
法律建议：
- 施工单位应严格遵守当地的施工时间规定，避免在严禁施工的时间段内进行施工。
- 如果因特殊原因需要在严禁施工的时间段内进行施工，施工单位应提前向相关部门申请并获得批准，同时采取必要的措施减少对周边居民的影响。
- 如果施工行为对周边居民造成了实际损害，施工单位应积极与居民沟通协商，承担相应的赔偿责任，避免矛盾升级和法律纠纷的发生。
可能涉及的法律条款：
- 虽然直接的法律条款可能因地区而异，但通常都会包含对施工时间的规定以及对违反规定行为的处罚措施。例如，《中华人民共和国噪声污染防治法》对建筑施工噪声有明确的规定，在噪声敏感建筑物集中区域，禁止夜间进行产生噪声的建筑施工作业（具体时间段可能因地区而异），但某些特殊情况下除外。施工单位应了解并遵守当地的相关法律法规。
如有更多疑问或需要进一步的法律帮助，请直接向我咨询。