违章建筑物的认定需由特定主体按照法定程序进行。

一. 认定主体

1. 乡村村庄内乱占耕地建房：一般由乡、镇人民政府按照法定程序来调查、核实、认定。
2. 城市规划区内违法占用土地进行建设或未按照规划许可证规定建设：一般是由县级以上地方人民政府城乡规划主管部门或自然资源主管部门来调查、认定和处理。

• 例如，若某村民在乡村内未经批准占用耕地建房，那么该乡、镇人民政府就有权对该建筑进行调查、核实并认定为违章建筑。

二. 认定程序

1. 立案、调查：相关部门接到举报或发现违法行为后，需组织两人以上执法人员实地调查，记录违法建筑信息，并拍照、录像，同时向当事人索要相关证明材料。

   • 根据《行政处罚法》的相关规定，调查过程需严格依法进行，确保证据的充分性和合法性。

2. 告知当事人违法事实、保障陈述、申辩权：在作出行政处罚决定前，行政机关需告知当事人拟作出的处罚内容、事实、理由及依据，并保障其陈述、申辩和要求听证的权利。

   • 例如，若当事人对调查结果有异议，认为自己的建筑不属于违章建筑，可以提出申辩或要求听证。

3. 作出行政处罚决定：对于当事人陈述、申辩不成立的，相关部门应在规定期限内作出行政处罚决定，如责令限期拆除决定书等。该决定书应包含当事人的基本信息、违法事实、处罚种类和依据、履行方式和期限、申请行政复议或提起行政诉讼的途径和期限等内容。

   • 这一步是认定违章建筑的关键环节，决定书的制作和送达都需严格依法进行。

4. 催告与执行：若当事人未按照行政处罚决定书的内容限期改正或拆除违章建筑，且未提起行政诉讼，相关部门需进行催告。催告后，若当事人仍未采取行动，相关部门可以作出强制执行决定书。

   • 催告和强制执行都是法定程序，旨在确保行政处罚的履行和违章建筑的拆除。

我建议：在面临违章建筑认定时，当事人应积极配合相关部门的调查，同时保留好相关证据和证明材料。若对认定结果有异议，应及时提出申辩或要求听证，并依法行使自己的救济权利。如有进一步需要，您可以继续咨询我。