违法建筑的认定主体主要包括县级以上地方人民政府城乡规划主管部门、乡（镇）人民政府，以及在某些特定情况下可能涉及的自然资源部门、城市管理综合行政执法部门等。以下是对这些认定主体的详细解释：

1. 县级以上地方人民政府城乡规划主管部门

   • 认定范围：主要负责城市、镇规划区内的违法建筑认定工作。这包括未取得建设工程规划许可证或未按照许可证规定建设的建筑物。
   • 法律依据：根据《中华人民共和国城乡规划法》第六十四条，未取得建设工程规划许可证或者未按照建设工程规划许可证的规定进行建设的，由县级以上地方人民政府城乡规划主管部门责令停止建设；尚可采取改正措施消除对规划实施的影响的，限期改正，处建设工程造价百分之五以上百分之十以下的罚款；无法采取改正措施消除影响的，限期拆除，不能拆除的，没收实物或者违法收入，可以并处建设工程造价百分之十以下的罚款。

2. 乡（镇）人民政府

   • 认定范围：负责乡、村庄规划区内的违法建筑认定和处理。这包括未经批准或违反乡村规划建设的建筑物。
   • 法律依据：根据《中华人民共和国城乡规划法》第六十五条，在乡、村庄规划区内未依法取得乡村建设规划许可证或者未按照乡村建设规划许可证的规定进行建设的，由乡、镇人民政府责令停止建设、限期改正；逾期不改正的，可以拆除。

3. 自然资源部门

   • 认定范围：在某些情况下，如涉及非法占用土地或超范围使用土地的建筑物，自然资源部门也有权进行认定。这通常与土地管理法规相关。
   • 法律依据：例如，《中华人民共和国土地管理法》第七十七条规定，未经批准或者采取欺骗手段骗取批准，非法占用土地的，由县级以上人民政府自然资源主管部门责令退还非法占用的土地，对违反土地利用总体规划擅自将农用地改为建设用地的，限期拆除在非法占用的土地上新建的建筑物和其他设施，恢复土地原状。

4. 城市管理综合行政执法部门

   • 认定范围：在一些地区，城市管理综合行政执法部门被赋予了对违法建筑的认定和查处权，这通常是通过立法授权集中行使行政处罚权实现的。
   • 法律依据：虽然直接的法律条文可能并未明确提及城市管理综合行政执法部门为违法建筑的认定主体，但根据《中华人民共和国行政处罚法》等相关法律法规的规定，行政机关可以在其法定权限内书面委托符合一定条件的组织实施行政处罚，因此，在某些地区，城市管理综合行政执法部门可能根据城乡规划主管部门或乡、镇人民政府的委托，行使违法建筑的认定和查处权。

特殊情形下的认定主体：

• 在某些复杂或跨部门的违法建筑案件中，可能需要多个部门联合进行调查和认定。例如，涉及历史遗留问题、产权纠纷或重大安全隐患的违法建筑，可能需要城乡规划、国土资源、住房城乡建设、公安消防等多个部门共同参与处理。

建议：

• 如果你面临违法建筑相关的问题，建议首先明确你的建筑所在区域和涉嫌违规的具体内容。
• 然后，根据具体情况，向相应的认定主体（如城乡规划主管部门、乡（镇）人民政府等）咨询或申请认定。
• 如有需要，也可以直接向我咨询，我将根据你的具体情况，为你提供针对性的法律建议和帮助。