违建的认定主体主要依据建设活动发生的地点及所涉及的法律法规来确定，通常包括城乡规划主管部门、乡（镇）人民政府以及自然资源部门等。以下是对这一问题的详细解析：

1. 城乡规划主管部门

   • 适用范围：主要负责城市、镇规划区内建筑物、构筑物等工程建设的违建认定。
   • 法律依据：根据《中华人民共和国城乡规划法》第六十四条，未取得建设工程规划许可证或者未按照建设工程规划许可证的规定进行建设的，由县级以上地方人民政府城乡规划主管部门责令停止建设；尚可采取改正措施消除对规划实施的影响的，限期改正，处建设工程造价百分之五以上百分之十以下的罚款；无法采取改正措施消除影响的，限期拆除，不能拆除的，没收实物或者违法收入，可以并处建设工程造价百分之十以下的罚款。
   • 实例说明：如某市市区内开发商未经规划许可擅自超建楼层，城乡规划主管部门即有权对此进行违建认定。

2. 乡（镇）人民政府

   • 适用范围：负责乡、村庄规划区内未依法取得或违反乡村建设规划许可证的建设行为的违建认定。
   • 法律依据：根据《中华人民共和国城乡规划法》第六十五条，在乡、村庄规划区内未依法取得乡村建设规划许可证或者未按照乡村建设规划许可证的规定进行建设的，由乡、镇人民政府责令停止建设、限期改正；逾期不改正的，可以拆除。
   • 实例说明：若某村庄村民未经许可在村集体土地上新建房屋，乡（镇）人民政府则有权对该房屋进行违建认定。

3. 自然资源部门

   • 适用范围：主要涉及土地使用方面的违法建设认定，如未经批准非法占用土地进行建设等。
   • 法律依据：根据《中华人民共和国土地管理法》第七十七条，未经批准或者采取欺骗手段骗取批准，非法占用土地的，由县级以上人民政府自然资源主管部门责令退还非法占用的土地，对违反土地利用总体规划擅自将农用地改为建设用地的，限期拆除在非法占用的土地上新建的建筑物和其他设施，恢复土地原状，对符合土地利用总体规划的，没收在非法占用的土地上新建的建筑物和其他设施，可以并处罚款。
   • 实例说明：如某企业未经批准占用农用地建设厂房，自然资源部门即可认定该厂房为违建。

4. 其他相关部门

   • 在某些情况下，住房和城乡建设部门、城市管理部门（综合行政执法部门）以及农业农村部门等也可能参与违建的认定和处理工作。例如，住房和城乡建设部门可能参与对违反施工许可、工程质量安全等规定的违法建筑的查处；城市管理部门在一些地区被授权行使部分城乡规划、住房城乡建设等领域的行政处罚权，包括对违法建筑的查处；农业农村部门则对于农村村民未经批准或者采取欺骗手段骗取批准，非法占用土地建住宅的，依据相关法律规定进行处理。

在违建认定过程中，还需注意以下几点：

• 严格的调查程序：行政机关在认定违建时，需进行全面、客观、公正的调查，收集包括但不限于建筑物的建设时间、审批情况及现场勘查记录等证据。
• 当事人权利保障：当事人享有陈述、申辩等权利。行政机关必须告知认定的事实、理由及依据，并听取当事人的意见。若未履行这些程序即直接认定违建，则该认定可能违法，当事人可通过行政复议、行政诉讼等途径维权。
• 历史遗留问题：对于历史遗留的建筑物，因当时规划管理不完善，不能仅依据现行标准简单认定。行政机关应充分考虑建筑物的历史背景和实际情况。

总结与建议： 违建的认定涉及当事人的重大权益，必须严格依法依规进行，避免随意性。若您面临违建认定问题，或有任何关于房产方面的疑问，都可以直接向我咨询，我会根据您的具体情况，提供更准确的法律意见和帮助。