您好，关于违建的认定部门，这通常取决于具体的法律法规以及地方政策。一般来说，违建的认定工作主要由城乡规划主管部门（如规划和自然资源局）以及相关的综合行政执法部门来负责。

一、城乡规划主管部门的角色

根据《中华人民共和国城乡规划法》等相关法律法规，城乡规划主管部门负责本行政区域内的城乡规划管理工作。这包括审核建设工程规划许可证的申请，以及对未取得建设工程规划许可证或者未按照建设工程规划许可证的规定进行建设的行为进行界定和处罚。因此，在大多数情况下，城乡规划主管部门是违建认定的主要部门。

二、综合行政执法部门的角色

除了城乡规划主管部门外，综合行政执法部门也承担着违建认定和处罚的重要职责。特别是在一些地方，城市管理相对集中行政处罚权已经交由综合行政执法部门行使，这包括对未经规划部门许可的违法建设行为的行政处罚权。因此，综合行政执法部门在违建认定和处置过程中也发挥着关键作用。

三、具体认定步骤

虽然不同地区的违建认定步骤可能略有差异，但通常包括以下几个环节：

1. 发现违建：这可以通过日常巡查、群众举报、媒体曝光等多种途径实现。

2. 初步调查：相关部门会对涉嫌违建的建筑物或构筑物进行初步调查，了解其建设情况、是否取得相关许可等。

3. 现场勘查：在初步调查的基础上，相关部门会组织现场勘查，核实违建的具体位置、面积、结构等信息。

4. 认定决定：根据现场勘查结果和相关法律法规，相关部门会作出违建认定决定，并出具相应的认定文书。

5. 后续处置：根据违建的性质和情节，相关部门会依法采取责令停建、限期拆除、罚款等处置措施。

四、地方政策差异

需要注意的是，不同地区的违建认定和处置政策可能存在差异。例如，在某些地区，乡镇人民政府也可能承担着违建认定的部分职责。因此，在具体操作中，建议您咨询当地的城乡规划主管部门或综合行政执法部门，以获取最准确的信息。

综上所述，违建的认定工作主要由城乡规划主管部门和综合行政执法部门来负责。如果您发现了违建情况，可以向这些部门进行举报或咨询相关事宜。希望这些信息能对您有所帮助。