您好，关于违建认定的部门，这通常取决于具体的地区和相关的法律法规。不过，我可以根据一些通用的规定和案例，给您一个较为详细的解答。
一般来说，违建的认定工作主要由城乡规划主管部门或者相关的城市管理执法部门来负责。具体来说：
城乡规划主管部门：这个部门通常负责城乡规划的制定、实施和监督。在违建认定方面，它们会根据相关的城乡规划法规，对建筑物的合法性进行评估。如果建筑物未取得建设工程规划许可证，或者虽然取得了许可证但未按照许可证内容实施建设，那么城乡规划主管部门就有权对其进行认定，并出具相应的认定意见。
城市管理执法部门：这个部门通常负责城市管理的日常执法工作，包括违建的查处。在接到违建举报或者发现违建线索后，城市管理执法部门会进行调查核实，并根据城乡规划主管部门的认定意见，依法对违建进行查处。
以您提供的参考信息为例：
在《东营市城乡规划条例》中，明确规定了未取得建设工程规划许可证的违法行为由城市管理执法部门依法查处；而已取得但未按照建设工程规划许可证内容实施的违法建设行为，则需要经城乡规划主管部门对违法行为性质及程度予以认定后，再由城市管理执法部门依法查处。
在《文成县违法建筑认定及分类处置办法》中，也提到了县自然资源和规划局（即城乡规划主管部门）在违建认定中的角色，同时明确了县综合行政执法局等部门在违建处置中的职责。
因此，违建的认定通常是由城乡规划主管部门或者相关的城市管理执法部门来负责的。不过，具体的认定流程和职责划分可能会因地区而异，建议您在遇到违建问题时，先咨询当地的城乡规划主管部门或者城市管理执法部门，以获取最准确的信息和指导。
希望这个解答能够对您有所帮助。如果您还有其他问题或者需要进一步的帮助，请随时告诉我。