在城乡规划领域，对于违法建筑的认定主体，主要依据相关法律法规以及实际管理情况来确定。以下是对这一问题的详细解答：
一、主要认定主体
城乡规划主管部门
- 法律依据：根据《中华人民共和国城乡规划法》第六十四条，未取得建设工程规划许可证或者未按照建设工程规划许可证的规定进行建设的，由县级以上地方人民政府城乡规划主管部门负责查处。
- 职责范围：城乡规划主管部门主要负责城市规划区内违法建筑的认定工作，包括未取得建设工程规划许可证或未按许可证规定建设的行为。他们有权责令停止建设，并根据情况采取改正措施、罚款、限期拆除或没收实物等处罚。
乡、镇人民政府
- 法律依据：依据《中华人民共和国城乡规划法》第六十五条，在乡、村庄规划区内未依法取得乡村建设规划许可证或者未按照乡村建设规划许可证的规定进行建设的，由乡、镇人民政府负责查处。
- 职责范围：乡、镇人民政府主要负责乡、村庄规划区内违法建筑的认定和处理工作。他们同样有权责令停止建设，并采取改正措施或拆除等处罚。
自然资源部门（原国土资源部门）
- 法律依据：涉及非法占用土地进行建设的行为，由自然资源部门依据《中华人民共和国土地管理法》等相关法律法规进行查处。
- 职责范围：自然资源部门主要负责查处非法占用农用地、未利用地等违法行为，以及未经批准擅自改变土地用途的行为。在违法建筑认定中，他们主要关注土地使用方面的合规性。
其他相关部门
- 住房和城乡建设部门：可能参与对违反施工许可、工程质量安全等规定的违法建筑的查处。
- 城市管理部门（综合行政执法部门）：在一些地区，城市管理部门被授权行使部分城乡规划、住房城乡建设等领域的行政处罚权，包括对违法建筑的查处。
- 农业农村部门：对于农村村民未经批准或者采取欺骗手段骗取批准，非法占用土地建住宅的，由农业农村部门依据相关法律规定进行处理。
二、特殊情形下的认定主体
授权或委托的组织
- 根据《行政处罚法》等相关法律法规的规定，行政机关可以在其法定权限内书面委托符合一定条件的组织实施行政处罚。因此，在某些地区，城乡规划主管部门或乡、镇人民政府可能会委托特定的组织（如城市管理综合执法局）来行使违法建筑的认定和查处权。
多部门联合认定
- 对于一些复杂或跨部门的违法建筑案件，可能需要多个部门联合进行调查和认定。例如，涉及历史遗留问题、产权纠纷或重大安全隐患的违法建筑，可能需要城乡规划、国土资源、住房城乡建设、公安消防等多个部门共同参与处理。
三、认定流程与协作机制
在实际操作中，违法建筑的认定通常遵循以下流程：
- 发现与举报：违法建筑可能通过日常巡查、群众举报等方式被发现。
- 调查取证：相关部门对涉嫌违法的建筑物进行调查取证，收集相关证据材料。
- 认定程序：根据调查结果和相关法律法规，由具有认定职权的部门进行认定，并作出相应的处理决定。
- 跨部门协作：各部门之间需要建立有效的协作机制，共同推进违法建筑的查处工作。特别是在涉及多个部门职责的复杂案件中，需要加强沟通协调，确保认定工作的准确性和高效性。
综上所述，城乡规划领域违法建筑的认定主体涉及多个方面，包括城乡规划主管部门、乡、镇人民政府、自然资源部门以及其他相关部门。在实际操作中，需要根据具体情况和法律法规来确定具体的认定主体，并遵循相应的认定流程和协作机制。