在施工中破坏了文物，处罚对象既可能是建设单位，也可能是施工单位，具体取决于实际情况和法律规定。以下从不同角度进行分析：
直接责任角度：
- 如果施工单位在施工过程中，因操作不当或疏忽大意直接导致了文物的破坏，那么施工单位应当承担直接责任。根据《中华人民共和国文物保护法》的相关规定，施工单位在文物保护单位的保护范围内进行建设工程或者爆破、钻探、挖掘等作业，必须确保文物保护单位的安全，不得破坏文物保护单位的历史风貌。若违反此规定，造成文物破坏的，施工单位将受到相应的行政处罚，甚至可能承担刑事责任。
管理责任角度：
- 建设单位作为工程项目的发起者和组织者，对施工单位的行为负有管理责任。如果建设单位在工程项目实施过程中，未对施工单位进行充分的文物保护教育和监督，或者未提供必要的文物保护措施和条件，导致施工单位在施工过程中破坏了文物，那么建设单位也可能需要承担一定的管理责任。这种责任可能是行政责任，也可能是民事责任，具体取决于建设单位的过错程度和造成的后果。
共同责任角度：
- 在某些情况下，建设单位和施工单位可能共同导致了文物的破坏。例如，双方在施工前未进行充分的文物勘探和评估，或者未制定有效的文物保护方案，导致在施工过程中意外发现了文物并造成了破坏。在这种情况下，建设单位和施工单位可能需要共同承担责任，包括行政责任、民事责任甚至刑事责任。
法律建议：
- 对于建设单位和施工单位而言，在工程项目实施前，应充分了解并遵守相关文物保护法律法规，进行必要的文物勘探和评估，制定有效的文物保护方案。
- 在施工过程中，应加强对施工人员的文物保护教育和监督，确保施工活动不会对文物造成破坏。
- 如果发现文物或疑似文物，应立即停止施工并报告相关部门，等待专业人员的处理和指导。
可能的法律后果：
- 如果因施工破坏文物，相关责任单位或个人可能面临行政处罚，如罚款、责令停工整改等。
- 在严重情况下，还可能承担刑事责任，如构成故意损毁文物罪等。
如有任何关于文物保护或施工法律方面的疑问，可以直接向我咨询。