关于“确认违法占地由哪个部门认定”的问题，我可以明确地告诉你，这一任务主要由县级以上人民政府自然资源主管部门来承担。以下是对这一结论的详细解释：

1. 主要职责：

   • 县级以上人民政府自然资源主管部门是土地管理的核心部门，负责全面监督土地使用情况。
   • 对于未经批准或骗取批准非法占用土地的行为，该部门具有查处职责。

2. 法律依据：

   • 根据《土地管理法》的相关规定，该部门具有责令退还土地、限期拆除违法建筑、没收地上建筑物以及处以罚款等行政处罚权力。

3. 行动措施：

   • 该部门会组织专业巡查队伍定期开展土地巡查，及时发现并制止违法占地行为。
   • 建立严格的土地审批制度，确保每一块土地的使用都经过合法审批。
   • 完善土地违法举报机制，鼓励公众积极参与监督。

此外，在农村宅基地管理方面，县级农业农村主管部门也负有重要职责，特别是查处农村村民非法占用土地建住宅的行为。而对于基层管理单位，如乡（镇）政府或街道办事处，虽然主要执法权集中在县级以上部门，但部分省份已将部分县级部门的行政处罚权下放至乡镇和街道，使其在法律框架内具备相应的执法权限，积极参与土地违法案件的查处与处理。

综上所述，如果你发现有人违法占地，可以向县级以上人民政府自然资源主管部门反映情况，他们会依法进行查处。如果你有任何疑问或需要进一步的法律帮助，请直接向我咨询。