根据《中华人民共和国固体废物污染环境防治法》（以下简称《固废法》）的相关规定，对于建筑垃圾污染土地的行为，主要由生态环境主管部门负责处罚。以下是对此问题的详细分析：

1. 法律依据与主管部门：

   • 《固废法》明确规定了生态环境主管部门在固体废物污染环境防治方面的职责。该法旨在保护和改善生态环境，防治固体废物污染环境，保障公众健康，维护生态安全，推进生态文明建设，促进经济社会可持续发展。
   • 在建筑垃圾污染土地的情况下，生态环境主管部门将依据《固废法》的相关规定，对违法行为进行调查、取证，并依法作出处罚决定。

2. 处罚措施与程序：

   • 生态环境主管部门在发现建筑垃圾污染土地的行为后，将首先进行调查，收集相关证据，包括现场勘查、询问当事人、调取监控录像等。
   • 根据调查结果，如果确认存在违法行为，生态环境主管部门将依法作出处罚决定，可能包括罚款、责令改正、限期清理等。
   • 处罚决定作出后，当事人应当履行处罚决定所规定的义务，如缴纳罚款、清理建筑垃圾等。如果当事人不履行处罚决定，生态环境主管部门可以依法申请人民法院强制执行。

3. 其他相关部门的协作：

   • 虽然生态环境主管部门是主要的处罚部门，但在实际工作中，可能还需要与其他相关部门进行协作。例如，城市管理部门可能负责建筑垃圾的日常监管和清理工作，住房和城乡建设部门可能负责建筑垃圾的产生、运输和处置的监管等。
   • 在建筑垃圾污染土地的情况下，这些部门可能会根据各自的职责，协助生态环境主管部门进行调查、取证和处罚工作。

4. 法律建议与预防措施：

   • 对于建筑垃圾的产生单位和个人，应当严格遵守《固废法》的相关规定，合理处置建筑垃圾，避免对土地造成污染。
   • 如果发现建筑垃圾污染土地的行为，应当及时向生态环境主管部门或其他相关部门报告，以便及时采取措施进行清理和处罚。
   • 为了预防建筑垃圾污染土地的发生，建议加强建筑垃圾的分类、回收和再利用工作，减少建筑垃圾的产生量，提高资源利用效率。

总结来说，对于建筑垃圾污染土地的行为，主要由生态环境主管部门负责处罚。在实际工作中，可能还需要与其他相关部门进行协作，共同维护土地环境的清洁和安全。如果您有任何关于建设工程领域的法律问题，特别是涉及建筑垃圾污染土地等环保方面的疑问，欢迎直接向我咨询。