违法建筑的拆除主体需依据不同情形来确定，主要包括以下几类：

1. 乡镇人民政府：

   • 适用范围：针对乡、村庄规划区内的违法建筑，如农村村民未经批准在自家宅基地外擅自建设的附属用房、养殖场等。
   • 法律依据：根据《中华人民共和国城乡规划法》第六十五条，乡镇人民政府对乡、村庄规划区内未依法取得乡村建设规划许可证或未按其规定建设的建筑，拥有责令停止建设、限期改正及逾期不改正时强制拆除的权力。

2. 城市管理综合行政执法部门（城管部门）：

   • 适用范围：在实施相对集中行政处罚权的城市，城管部门有权对城市规划区内的违法建筑进行查处和拆除，如街道两侧的违法搭建、占道建筑等。
   • 法律依据：依据相关地方性法规或政府规章授权，城管部门获得这种权力，通常通过行政权力相对集中的方式实现。

3. 自然资源主管部门：

   • 适用范围：处理涉及非法占用土地建设的违法建筑，如未经批准在农用地上建设厂房、私自在集体土地上开发房地产等行为。
   • 法律依据：根据《中华人民共和国土地管理法》第七十七条、第八十三条，对于非法占用土地建住宅等违法情形，县级以上人民政府自然资源主管部门有权责令退还土地、限期拆除建筑物，并在当事人不起诉且不自行拆除的情况下，申请人民法院强制执行。

4. 其他有执法权的部门：

   • 适用范围：如水利、交通等部门，在特定领域（如河道管理范围）内也有对违法建筑的查处和强拆权力。
   • 法律依据：依据相关法律法规进行处理，例如水利部门可能依据《中华人民共和国水法》等相关规定，对河道管理范围内的违法建筑进行查处和拆除。

5. 人民法院：

   • 适用范围：当行政机关本身没有强制拆除的权力时，可以向人民法院提出强制执行申请。
   • 法律依据：根据《中华人民共和国行政强制法》第五十三条，行政机关在法定期限届满后三个月内，可以向人民法院提出强制执行申请。人民法院审查后作出是否准予执行的裁定，并组织实施强制拆除。

在拆除违法建筑的过程中，必须严格遵守法定程序：

• 事先催告：在实施强制拆除前，行政机关应事先催告当事人履行义务，给予其合理的履行期限。
• 听取当事人陈述申辩：当事人有权在催告期间内提出陈述和申辩，行政机关应认真听取并考虑其意见。
• 作出强制执行决定：若当事人未在催告期内履行义务，且陈述申辩未被采纳，行政机关应依法作出强制执行决定，明确执行的时间、方式和依据等。
• 组织实施强制拆除：强制执行决定生效后，由具有强制拆除权力的行政机关或人民法院组织实施强制拆除。在此过程中，应确保执行行为的合法性、合理性和必要性，避免对当事人造成不必要的损失。

法律建议：

• 如果您面临违法建筑强拆问题，建议首先确认拆除主体的合法性，即确认是否有权机关依据相关法律法规进行拆除。
• 同时，关注拆除程序是否合规，如是否事先催告、是否听取陈述申辩等，以保障自身合法权益。
• 如果对拆除行为有异议，可以依法提起行政复议或行政诉讼，维护自身权益。

如有任何疑问或需要进一步的法律帮助，请直接向我咨询。