违建的认定主体主要包括县级以上地方人民政府城乡规划主管部门、乡（镇）人民政府、自然资源部门以及城市管理综合行政执法部门，其认定依据主要来源于相关法律法规。以下是对这一问题的详细解答：

一、认定主体及其法律依据

1. 县级以上地方人民政府城乡规划主管部门

   • 认定范围：主要负责城市、镇规划区内的违建认定。这包括未取得建设工程规划许可证或未按许可证规定建设的行为。
   • 法律依据：《中华人民共和国城乡规划法》第六十四条明确规定，未取得建设工程规划许可证或者未按照建设工程规划许可证的规定进行建设的，由县级以上地方人民政府城乡规划主管部门责令停止建设；尚可采取改正措施消除对规划实施的影响的，限期改正，处建设工程造价百分之五以上百分之十以下的罚款；无法采取改正措施消除影响的，限期拆除，不能拆除的，没收实物或者违法收入，可以并处建设工程造价百分之十以下的罚款。

2. 乡（镇）人民政府

   • 认定范围：在乡、村庄规划区内，负责规划和建设管理，对未依法取得乡村建设规划许可证或未按许可证规定建设的行为，有权认定为违建并进行处理。
   • 法律依据：《中华人民共和国城乡规划法》第六十五条规定，在乡、村庄规划区内未依法取得乡村建设规划许可证或者未按照乡村建设规划许可证的规定进行建设的，由乡、镇人民政府责令停止建设、限期改正；逾期不改正的，可以拆除。

3. 自然资源部门

   • 认定范围：针对违反《中华人民共和国土地管理法》，非法占用土地进行建设的情况，自然资源部门有权认定该建筑为违建。
   • 法律依据：《中华人民共和国土地管理法》第七十七条规定，未经批准或者采取欺骗手段骗取批准，非法占用土地的，由县级以上人民政府自然资源主管部门责令退还非法占用的土地，对违反土地利用总体规划擅自将农用地改为建设用地的，限期拆除在非法占用的土地上新建的建筑物和其他设施，恢复土地原状，对符合土地利用总体规划的，没收在非法占用的土地上新建的建筑物和其他设施，可以并处罚款；对非法占用土地单位的直接负责的主管人员和其他直接责任人员，依法给予处分；构成犯罪的，依法追究刑事责任。

4. 城市管理综合行政执法部门

   • 认定范围：在一些地区，通过行政权力相对集中，城市管理综合行政执法部门被赋予了对违建的认定和查处权。
   • 法律依据：《中华人民共和国行政处罚法》第十八条规定，国家在城市管理、市场监管、生态环境、文化市场、交通运输、应急管理、农业等领域推行建立综合行政执法制度，相对集中行政处罚权。国务院或者省、自治区、直辖市人民政府可以决定一个行政机关行使有关行政机关的行政处罚权。限制人身自由的行政处罚权只能由公安机关和法律规定的其他机关行使。

二、违建认定的其他注意事项

• 地方性法规和政府规章：各地根据实际情况可能制定了关于违建认定和处理的地方性法规和政府规章，这些规定也是认定违建的重要依据。
• 认定程序：违建的认定过程需考虑是否依法申办了建筑用地规划许可、建设工程许可手续，以及是否违反城乡整体规划等因素。认定过程应确保公正、透明，并保障当事人的合法权益。
• 异议处理：如果当事人对违建认定结果有异议，有权进行申诉和辩解，以维护自己的合法权益。

三、实际应用指导

在实际操作中，确定违建的认定主体和法律依据需综合考虑建筑所在区域、违规性质及具体法律法规。对于疑似违建的情况，建议首先咨询当地城乡规划主管部门或乡（镇）人民政府以获取准确指导和帮助。同时，在处理违建问题时，应严格遵守相关法律法规，确保执法的公正性和合法性。

如有任何关于违建认定的法律问题或需要进一步的法律帮助，请直接向我咨询。