邻居与邻居之间一般不能直接认定违建，违建的认定通常由相关行政主管部门进行。以下从多个角度为你详细分析：

违建认定的主体

违建，即违法建筑，是指未经规划土地主管部门批准，未领取建设工程规划许可证或临时建设工程规划许可证，擅自建筑的建筑物和构筑物。根据相关法律法规，违建的认定主体通常是城乡规划主管部门、城市管理综合行政执法部门等行政机关，而不是邻居之间。这些行政机关具有专业的知识和权限，能够对建筑物的合法性进行准确判断。

邻居之间的纠纷处理

虽然邻居之间不能直接认定违建，但邻居之间可能会因为建筑物的建设、使用等问题产生纠纷。例如，邻居可能认为对方的建筑物影响了自己的采光、通风、通行等权益。在这种情况下，邻居可以通过协商、调解、投诉或诉讼等方式来维护自己的合法权益。

1. 协商：邻居之间可以尝试通过友好协商的方式解决问题，达成一致意见。
2. 调解：如果协商不成，可以寻求第三方调解机构的帮助，如社区调解委员会、人民调解委员会等，进行调解。
3. 投诉：如果认为对方的建筑物确实存在违法建设的情况，可以向相关行政主管部门进行投诉，由行政机关进行调查处理。
4. 诉讼：如果以上方式均无法解决问题，邻居还可以向人民法院提起诉讼，通过法律途径维护自己的权益。

违建认定的程序

如果行政机关认为某建筑物可能存在违法建设的情况，会按照法定程序进行调查和处理。这通常包括：

1. 立案调查：行政机关接到投诉或发现违法建设线索后，会进行立案调查，收集相关证据。
2. 现场勘查：行政机关会派员到现场进行勘查，了解建筑物的具体情况。
3. 认定处理：根据调查结果，行政机关会作出是否属于违法建筑的认定，并依法进行处理。如果认定为违法建筑，可能会责令限期拆除、罚款等。

邻居在违建认定中的作用

虽然邻居不能直接认定违建，但在违建认定过程中，邻居的举报和投诉往往是一个重要的线索来源。行政机关在调查处理违法建设时，可能会向邻居了解相关情况，收集证据。因此，邻居在发现违法建设时，可以积极向行政机关举报，提供线索和证据，协助行政机关进行调查处理。

如果你遇到邻居之间的建筑纠纷或认为存在违法建设的情况，建议先尝试与邻居协商解决，如果无法解决，可以向相关行政主管部门投诉或寻求法律帮助。有问题可以直接向我咨询，我会为你提供专业的法律意见。