在我国，有资格判定违建行为的主体主要包括城乡规划主管部门、乡（镇）人民政府、自然资源部门、城市管理综合行政执法部门（城管）以及特定情况下的其他授权主体。以下是对这些主体的详细解释和归纳：

1. 城乡规划主管部门

   • 适用范围：城市、镇规划区内。
   • 具体职责：依据《中华人民共和国城乡规划法》，城乡规划主管部门负责认定未取得建设工程规划许可证或未按规划许可建设的建筑为违章建筑，并进行处理。例如，对于在城市中未经批准擅自搭建的建筑物、构筑物，如私自加盖的阳光房、违规建设的商铺等，城乡规划主管部门有权依法进行认定和处理。

2. 乡、镇人民政府

   • 适用范围：乡、村庄规划区内。
   • 具体职责：根据《中华人民共和国城乡规划法》，在乡、村庄规划区内未依法取得乡村建设规划许可证或未按许可建设的建筑，由乡、镇人民政府负责认定和处理。这包括在农村集体土地上未经批准私自建设的住宅、养殖场等。

3. 自然资源部门

   • 适用范围：涉及非法占用土地的建设行为。
   • 具体职责：自然资源部门负责监管土地使用情况，对未经批准擅自占用土地进行建设的行为进行认定和查处。若建设项目占用的土地不符合土地利用总体规划或未办理合法用地审批手续，自然资源部门将判定其为违建。例如，在农用地上违规建设工业厂房。

4. 城市管理综合行政执法部门（城管）

   • 适用范围：部分地方通过立法授权，集中行使对违章建筑的处罚权。
   • 具体职责：根据地方政府授权，城市管理综合行政执法部门对城市规划区内的违章建筑进行巡查、认定和处罚。这包括在城市的街道、广场等公共场所存在的违法搭建物，城市管理部门可以直接进行查处和拆除。

5. 其他授权主体

   • 情况说明：在某些特定领域或特殊情况下，法律法规可能会授权其他组织具备一定的违法建筑拆除权限。例如，在一些开发区、工业园区等特殊区域，可能会设立专门的管理委员会，并被授予相应的管理职权，其中包括对区域内违法建筑的查处和拆除权力。但这种情况必须有明确的法律法规依据，且该组织的行为同样要受到法律的监督和制约。

在判定违建行为时，各主体应依据相关法律法规，准确判断建筑的合法性。违章建筑的认定主要基于以下标准：未经批准在承包地、宅基地等集体土地上新建的建筑物；未取得建设工程规划许可证或未按批准范围施工的建筑物；在拆迁征收范围确定后实施新建、扩建、改建的建筑物；非法占有国有土地或集体土地新建的建筑物；在现有房屋四周、院落、屋顶、阳台自建或在过道、马路边、公共绿地等土地上搭建的建筑物。

如果您对违建判定或相关法律问题存在疑问，可以直接向我咨询。作为专业律师，我将根据您的具体情况，提供全面、准确的法律建议和帮助。