违法搭建的管理涉及多个部门，具体由哪个部门来处理，取决于违法搭建的具体情况、所在地区的相关规定以及违建行为对他人合法权益的影响。以下是从不同角度对违法搭建管理部门的详细分析：

1. 城乡规划主管部门（自然资源部门/规划部门）

   • 主要职责：城乡规划主管部门是违法搭建管理的主要责任部门，负责土地利用和城乡规划的管理和监督。对于违反土地利用总体规划和城乡规划的建设行为，该部门有权进行认定和处理。
   • 适用情况：如果违法搭建涉及改变土地用途、未按照规划许可进行建设，如在耕地上违规搭建建筑物、在规划为绿地的土地上搭建房屋等，城乡规划主管部门将介入调查并依法处理。

2. 城市管理部门（综合执法局/城管）

   • 主要职责：城市管理部门集中行使城市规划管理方面的行政处罚权，负责查处和监管违反城市规划的建设行为。在城市建成区内，该部门是处理违法搭建问题的主要执法力量。
   • 适用情况：城市区域内未经规划许可进行的临时或永久性建筑物、构筑物搭建，如街道两旁私自搭建的简易棚屋、占用公共通道搭建的摊位等，这些行为影响城市容貌、环境卫生和公共秩序，城市管理部门将依法进行查处。

3. 住房和城乡建设部门

   • 主要职责：住房和城乡建设部门对建筑工程的建设活动进行监督管理，确保建筑工程符合相关的建筑质量、安全和规划要求。
   • 适用情况：对于规模较大、涉及建筑工程施工的违法搭建行为，如未取得施工许可证就开始建设的多层或高层建筑，住房和城乡建设部门将介入调查并依法处理。

4. 乡镇人民政府或街道办事处

   • 主要职责：乡镇人民政府或街道办事处在其辖区内对各类建设活动进行日常巡查和监督管理，对于发现的违法搭建行为有权进行制止和处理。
   • 适用情况：在农村地区或城市街道社区内的小规模违法搭建行为，如村民在宅基地上违规扩建房屋、居民在小区内私自搭建雨棚等，乡镇人民政府或街道办事处通常会首先介入进行管理和协调。

5. 土地行政主管部门

   • 主要职责：县级以上地方人民政府土地行政主管部门对违法占地建设行为具有管辖权。
   • 适用情况：如果违法搭建涉及到非法占用土地，如未经批准擅自占用农用地进行建设，土地行政主管部门将介入调查并依法处理。

法律建议：

• 在面临违法搭建问题时，建议先咨询当地政府或相关部门，了解具体的处理流程和要求。
• 如果违法搭建行为侵犯了自己的合法权益，除了向相关政府部门投诉外，还可以向法院提起民事诉讼，要求对方排除妨碍、恢复原状等。

可能法律后果：

• 违法搭建行为可能面临责令停止建设、限期改正、罚款、限期拆除等处理决定。如果无法改正，则可能面临限期拆除或没收实物及违法收入，并可并处罚款的后果。

综上所述，违法搭建的管理是一个涉及多个部门的复杂问题。在处理时，需要根据具体情况确定由哪个部门来主导处理，并了解相应的处理流程和要求。如果你有任何关于违法搭建的法律问题，可以直接向我咨询，我会根据你的具体情况提供详细的法律建议。