关于“在村内空闲地上违规建筑谁管”这个问题，我可以明确地告诉你，这主要由乡镇人民政府来管理。下面我会详细解释这个结论，并给出相关的法律依据。

结论前置：在乡村地区，违规建筑的管理主要由乡镇人民政府负责。他们依据相关法律法规，对本行政区域内的乡村建设行为实施全面的监督与管理。

详细解释：

1. 乡镇人民政府的管理职责：

   • 根据《中华人民共和国城乡规划法》第六十五条的规定，乡、镇人民政府对乡、村庄规划区内未依法取得乡村建设规划许可证或未按许可证规定进行建设的行为，有权责令停止建设、限期改正，逾期不改正的可拆除。
   • 这意味着，如果村民在村庄的空闲地上违规建筑，乡镇人民政府是有权进行管理和处理的。

2. 其他相关部门的管理职责：

   • 虽然乡镇人民政府在乡村违规建筑管理中处于关键地位，但并不意味着其他部门没有管理职责。
   • 如果违规建筑涉及土地利用等复杂问题，乡镇人民政府还会会同自然资源等部门共同处理。
   • 同时，县级以上人民政府的城乡规划主管部门也对乡村规划建设有一定的管理职责，可以对违反乡村规划的行为进行查处。

3. 实际操作中的协同工作：

   • 在实际操作中，乡镇人民政府会与相关部门紧密配合，共同维护乡村建设的秩序和合法合规性。
   • 他们通过协同工作，确保乡村建设符合法律法规的要求，为乡村的稳定发展奠定坚实的基础。

法律依据：

• 《中华人民共和国城乡规划法》第六十五条：“在乡、村庄规划区内未依法取得乡村建设规划许可证或者未按照乡村建设规划许可证的规定进行建设的，由乡、镇人民政府责令停止建设、限期改正；逾期不改正的，可以拆除。”

综上所述，如果你在村内空闲地上发现违规建筑，可以直接向当地的乡镇人民政府反映情况。他们会根据相关法律法规进行处理，确保乡村建设的合法合规性。如果你还有其他法律问题或需要进一步的帮助，请随时向我咨询。