违法活动板房的管理涉及多个部门，具体由哪个部门管理需根据违法活动板房的具体情况和所在区域来确定。以下是从不同角度对这一问题进行的详细分析：

一、城乡规划部门的管理职责

1. 法律依据：根据《中华人民共和国城乡规划法》的相关规定，城乡规划部门负责城市、镇规划区内建筑物、构筑物等工程建设的规划许可和管理工作。未取得建设工程规划许可证或未按许可证规定进行建设的，由城乡规划部门责令停止建设。
2. 管理范围：若违法活动板房位于城市、镇规划区内，且未取得建设工程规划许可证或未按许可证规定建设，则由城乡规划部门负责管理。例如，在城市市区内擅自搭建的活动板房，若未取得规划许可，即属于城乡规划部门的查处范围。

二、城市管理综合行政执法部门的管理职责

1. 法律依据：依据各地关于城市管理综合行政执法的相关规定，许多地方通过行政权力下放或综合执法改革，将城乡规划领域的部分行政处罚权交由城市管理综合行政执法部门行使。
2. 管理范围：城市管理综合行政执法部门通常涵盖城市规划区内的各类违规建筑查处工作，特别是违反市容市貌、影响城市环境的违规搭建行为。若违法活动板房位于城市街道两侧或影响市容市貌的区域，且违反了相关市容管理规定，则可能由城市管理综合行政执法部门负责查处。

三、乡镇人民政府的管理职责

1. 法律依据：《中华人民共和国城乡规划法》明确规定，乡、镇人民政府负责乡、村庄规划区内违规建筑的管理。对于未依法取得乡村建设规划许可证或未按许可证规定进行建设的行为，乡镇人民政府有权责令停止建设、限期改正；逾期不改正的，可以拆除。
2. 管理范围：若违法活动板房位于乡、村庄规划区内，且未取得乡村建设规划许可证或未按许可证规定建设，则由乡镇人民政府负责管理。例如，村民在村庄规划区内未经许可擅自搭建的活动板房，即属于乡镇人民政府的查处范围。

四、土地管理部门的管理职责

1. 法律依据：根据《中华人民共和国土地管理法》的规定，土地管理部门负责查处涉及土地使用方面的违规建筑，如未经批准在农用地上建设非农业设施、非法占用耕地建房等行为。
2. 管理范围：若违法活动板房涉及非法占用土地，如未经批准在农用地上搭建活动板房，则由土地管理部门负责查处。土地管理部门有权责令退还非法占用的土地，并限期拆除在非法占用的土地上新建的建筑物和其他设施。

实际操作建议

在实际操作中，建议根据违法活动板房的具体情况（如位置、性质、规模等）和所在区域的法律法规来确定具体的管理部门。若无法确定管理部门或遇到管理争议，可以向当地城乡规划主管部门或城市管理部门咨询，以获取准确的指导和帮助。

总结：违法活动板房的管理是一个涉及多部门的综合性工作。各部门根据其职能依据和管理范围承担相应的管理职责。因此，在处理违法活动板房问题时，应首先明确其具体情况和所在区域，然后确定具体的管理部门并咨询相关部门以获取准确的指导和帮助。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。