结论前置：乡镇违法建筑的管理主要涉及乡（镇）人民政府、县级自然资源部门以及县级农业农村部门，各部门依据相关法律法规在各自职责范围内进行监管和处理。
一、乡（镇）人民政府
主要职责：
- 乡（镇）人民政府作为基层政府部门，对本行政区域内的违法建筑有属地管理职责。
- 负责日常巡查，及时发现并制止违法建筑行为。
- 对确认的违法建筑，有权责令当事人限期改正，包括补办审批手续或拆除、整改不符合规划的部分。
- 若当事人逾期不改正，乡（镇）人民政府可组织力量依法拆除违法建筑。
法律依据：
- 根据《中华人民共和国城乡规划法》第六十五条，乡（镇）人民政府对未依法取得乡村建设规划许可证或未按规划进行建设的行为，有权进行上述处理。
二、县级自然资源部门
主要职责：
- 县级自然资源部门负责土地资源的管理和监督，审查建房是否符合土地利用规划等相关规定。
- 对非法占用土地、擅自改变土地用途等违法建筑行为进行查处。
- 有权责令退还非法占用的土地，限期拆除在非法占用的土地上新建的建筑物和其他设施，并可处以罚款。
法律依据：
- 根据《中华人民共和国土地管理法》第七十七条等，县级自然资源部门对违法用地导致的违法建筑具有查处权。
三、县级农业农村部门
主要职责：
- 县级农业农村部门主要针对涉及农村宅基地方面的违法建筑问题进行管理和处罚。
- 对农村村民未经批准或者采取欺骗手段骗取批准，非法占用土地建住宅的行为，有权责令退还非法占用的土地，限期拆除在非法占用的土地上新建的房屋。
- 超过省、自治区、直辖市规定的标准，多占的土地以非法占用土地论处。
法律依据：
- 根据《中华人民共和国土地管理法》第七十八条，县级农业农村部门对农村村民非法占地建住宅的行为具有查处权。
综合说明与建议
- 多部门协作：乡镇违法建筑的管理是一个涉及多个部门的综合性工作，需要乡（镇）人民政府、县级自然资源部门和县级农业农村部门等协同合作，共同维护农村建筑秩序。
- 及时反映与举报：若发现乡镇违法建筑，应及时向相关部门反映和举报。通常情况下，可以先向当地自然资源部门报告，由其进行初步调查和认定。若涉及乡村规划或宅基地管理问题，也可同时向乡（镇）人民政府或农业农村部门寻求协助。
- 增强法律意识：农村居民在进行建设时，应严格遵守相关法律法规和规划要求，避免产生违法建筑，以免遭受不必要的法律后果和经济损失。
在实际操作中，各部门应严格遵循法律法规，确保执法行为的合法性和公正性，保护农民的合法权益，促进农村社会的和谐稳定。如果您在乡镇违法建筑方面遇到任何问题或需要进一步的法律帮助，请随时向我咨询。