结论：施工单位改变林地用途，处罚的对象既可能是施工单位，也可能是建设单位，具体取决于实际情况和法律规定。以下从不同角度进行分析：
从直接行为与责任承担的角度：
- 如果施工单位是直接改变林地用途的行为人，且该行为未经合法批准或违反了相关法律法规，那么施工单位应当承担相应的法律责任。这包括可能面临的行政处罚，如罚款、恢复原状等，甚至可能涉及刑事责任，如非法占用农用地罪等。
从建设单位与施工单位关系及责任划分的角度：
- 建设单位作为项目的发起者和组织者，对项目的合法性和合规性负有监督责任。如果建设单位明知施工单位将改变林地用途而未予以制止，或者与施工单位共同实施了改变林地用途的行为，那么建设单位也可能需要承担相应的法律责任。
- 在实践中，建设单位与施工单位之间通常会签订施工合同，明确双方的权利和义务。如果合同中明确规定了施工单位不得改变林地用途，而施工单位违反了这一约定，那么建设单位在追究施工单位违约责任的同时，也可能因自身监督不力而承担一定的管理责任。但这种管理责任与直接改变林地用途的法律责任是有所区别的。
从相关法律法规的角度：
- 根据《中华人民共和国森林法》等相关法律法规的规定，任何单位和个人不得擅自改变林地用途。违反规定的，将受到法律的制裁。在处罚时，会综合考虑行为人的主观故意、行为后果、社会影响等因素，来确定具体的处罚对象和处罚措施。
法律建议：
- 对于施工单位而言，应当严格遵守相关法律法规和施工合同的规定，不得擅自改变林地用途。如果确实需要改变林地用途，应当依法办理相关审批手续，并确保在合法合规的前提下进行施工。
- 对于建设单位而言，应当加强对施工单位的监督和管理，确保施工单位按照合同约定和法律法规的要求进行施工。如果发现施工单位有擅自改变林地用途的行为，应当及时予以制止，并报告相关部门进行处理。
可能的法律后果：
- 如果施工单位或建设单位擅自改变林地用途，可能面临行政处罚，如罚款、恢复原状等；情节严重的，还可能涉及刑事责任，如非法占用农用地罪等。同时，还可能因违反合同约定而承担违约责任，赔偿对方因此遭受的损失。
如有更多关于农村土地或宅基地方面的法律问题，可以直接向我咨询。