违法建设的认定主要依据相关法律法规、规划要求以及实际建设情况，是一个综合判断的过程。以下从认定部门、认定依据、认定标准及流程四个方面进行详细解析：

一、认定部门

违法建设的认定部门因具体情况和地区差异而有所不同，主要包括以下几类：

1. 自然资源主管部门：主要负责处理涉及土地利用规划方面的违法建设，如未经批准擅自占用农用地进行建设。
2. 城乡规划主管部门：负责城市、镇规划区内未取得或未按建设工程规划许可证要求进行建设的行为认定与处理，包括擅自增加建筑物层数或改变用途等。
3. 城市管理综合执法部门（城管部门）：在一些地方，城管部门被赋予了对违法建设的部分或全部查处权，特别是在城市街道、广场等公共场所的违法搭建行为。
4. 乡、镇人民政府：主要负责乡、村庄规划区内未依法取得或未按乡村建设规划许可证要求进行建设的行为认定与查处，如村民未经许可擅自扩大宅基地面积建房。

二、认定依据

违法建设的认定主要依据以下法律法规：

1. 《中华人民共和国城乡规划法》：该法明确规定了城乡规划的制定、实施和修改程序，以及土地使用的规范和限制。任何违反这些规定进行的建设活动，都可能被认定为违法建设。
2. 《中华人民共和国土地管理法》：该法涉及非法占地等情形，为违法建设的认定提供了土地管理方面的法律依据。
3. 地方性法规与规章：各地通过细化规定（如《北京市禁止违法建设若干规定》）补充认定标准，使违法建设的认定更加具体和可操作。

三、认定标准

违法建设的认定标准主要包括以下几点：

1. 未取得建设工程规划许可证：在城市、镇规划区内进行建筑物、构筑物、道路、管线和其他工程建设的，必须取得建设工程规划许可证。未取得该许可证而擅自建设的，属于违法建设。
2. 未按照建设工程规划许可证的规定进行建设：即使取得了建设工程规划许可证，但如果建设单位或个人在建设过程中擅自改变规划条件（如建筑高度、面积、用途等），或者超出许可范围进行建设，也属于违法建设。
3. 未经批准进行临时建设或临时建筑物超过批准期限不拆除：在城市、镇规划区内进行临时建设的，应当经城市、县人民政府城乡规划主管部门批准。临时建筑物、构筑物超过批准期限不拆除的，同样被视为违法建设。
4. 其他违反城乡规划的行为：如在规划确定保留的园林绿地、河湖水系、道路和古树名木保护范围内进行建设，或者占用乡村公共设施用地、公益事业用地等进行建设，且未依法办理农用地转用审批手续的，也属于违法建设。

四、认定流程

违法建设的认定流程一般包括以下几个步骤：

1. 立案调查：相关执法部门在发现涉嫌违法建设的行为后，会进行立案调查，收集相关证据材料。
2. 现场勘查与询问：执法人员会对涉嫌违法建设的现场进行勘查，并询问相关人员以了解具体情况。
3. 审查规划许可文件：核实建设单位或个人是否取得了相应的建设工程规划许可证或其他相关许可文件。
4. 作出认定决定：根据调查结果和相关法律法规，执法部门会作出是否构成违法建设的认定决定。
5. 告知与听证：在作出认定决定前，执法部门通常会告知当事人相关权利，并可能组织听证会听取当事人的陈述和申辩。
6. 送达认定决定书：最终，执法部门会将认定决定书送达给当事人，并告知其救济途径和期限。

在实际操作中，如果面临违法建设认定的问题，建议首先明确违法建设的地点和性质，然后咨询当地相关部门以获取具体的认定和处理流程。同时，也提醒广大建设单位和个人在从事建设活动前，务必依法依规办理相关手续，避免产生违法建设行为。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。