广告牌违规建设，处罚的对象主要取决于广告牌的建设主体以及具体的违规情形，但通常情况下，主要处罚的是广告牌的建设者或所有者。以下从不同角度进行详细分析：
一、建设者责任
直接责任：
- 如果广告牌是由某个公司或个人直接建设，且该建设行为未经相关部门批准或违反了相关建设规定（如未取得建设工程规划许可证、未按照规划要求进行建设等），那么该建设者将直接承担违规建设的责任。
- 处罚措施可能包括罚款、责令拆除违规广告牌、恢复原状等。具体罚款数额会根据违规情节的严重程度、广告牌的规模、对周边环境的影响等因素综合确定。
连带责任：
- 在某些情况下，如果建设者与广告牌的所有者不是同一主体，但建设者明知或应知建设行为违规仍进行建设，那么建设者可能还需与所有者承担连带责任。
二、所有者责任
管理责任：
- 广告牌的所有者对其广告牌负有管理责任。如果广告牌存在违规建设情形，且所有者未尽到合理的管理义务（如未及时发现并制止违规建设行为、未配合相关部门进行整改等），那么所有者也可能受到处罚。
- 处罚措施同样可能包括罚款、责令拆除违规广告牌等。
使用责任：
- 如果广告牌的所有者将广告牌出租或出借给他人使用，且使用过程中发现广告牌存在违规建设情形，所有者仍需承担一定的责任。因为所有者作为广告牌的产权人，有义务确保广告牌的合法性和安全性。
三、特殊情形下的责任
政府或公共部门责任：
- 在极少数情况下，如果广告牌是由政府或公共部门建设或管理的，且存在违规建设情形，那么相关政府部门或公共部门将承担责任。但这种情况较为罕见，且通常涉及复杂的行政程序和法律责任划分。
第三方责任：
- 如果广告牌的违规建设是由于第三方（如设计单位、施工单位等）的过错导致的，那么第三方也可能需要承担相应的责任。但这并不免除建设者或所有者的主要责任，他们仍需根据具体情况承担相应的处罚。
四、法律建议
- 对于建设者或所有者：在建设或管理广告牌时，务必确保遵守相关法律法规和规划要求，取得必要的批准和许可。如果发现广告牌存在违规建设情形，应及时进行整改或拆除，以避免受到处罚。
- 对于相关部门：应加强对广告牌建设的监管力度，定期巡查和检查广告牌的建设情况，及时发现并制止违规建设行为。同时，应建立健全的投诉和举报机制，鼓励公众参与监督，共同维护城市环境和公共安全。
在实际操作中，如果广告牌违规建设行为被发现，相关部门通常会根据具体情况对建设者或所有者进行处罚。因此，建议相关主体在建设或管理广告牌时务必谨慎行事，确保合法合规。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。