是否要求乡政府查处违法建筑与自身存在利害关系，需分情况讨论，具体如下：

1. 若您是违法建筑的直接相邻权人或受影响方

   • 存在直接利害关系：根据《行政处罚法》及相关地方性法规，相邻权人（如土地、房屋的直接相邻使用者）因违法建筑可能遭受采光、通风、排水、通行等实际权益侵害时，有权要求乡政府履行查处职责。例如，邻居违规搭建的建筑遮挡了您的阳光，或占用了公共通道影响通行，此时您与查处行为存在直接利害关系，可依法申请行政复议或提起行政诉讼。

2. 若您是违法建筑所在区域的居民或公众利益代表

   • 可能存在间接利害关系：若违法建筑破坏了区域规划、环境或公共安全（如占用消防通道、破坏绿地等），虽未直接侵害您的个人权益，但您作为区域居民或公众利益代表，可能以“公益诉讼”或“群众举报”形式要求乡政府查处。此时，您的利害关系更多体现为对公共利益的维护，而非直接个人权益，但部分地区法规（如《城乡规划法》）支持公众参与监督，您仍可能具备行政诉讼原告资格。

3. 若您与违法建筑无直接或间接关联

   • 通常不构成利害关系：若您仅因个人意愿（如认为违法建筑“影响市容”）要求查处，但未提供证据证明自身权益受损，则与乡政府的查处行为无利害关系。此时，您可能不具备申请行政复议或提起行政诉讼的主体资格，但可通过信访、举报等渠道反映问题。

法律建议：

• 明确自身权益：若您认为违法建筑侵害了您的合法权益，建议收集相关证据（如照片、视频、权属证明等），并书面要求乡政府履行查处职责。
• 依法维权：若乡政府未履行职责或处理结果不满意，您可在知道或应当知道该行政行为之日起60日内申请行政复议，或在6个月内直接提起行政诉讼。
• 关注地方性法规：部分地区对违法建筑的查处有更详细的规定（如举报奖励、查处程序等），建议您查阅当地法规或咨询专业律师，以更精准地维护自身权益。

可能后果：

• 若您具备利害关系但未依法维权，可能导致违法建筑长期存在，进一步侵害您的权益。
• 若您不具备利害关系却强行要求查处，可能因主体不适格被驳回申请或诉讼，浪费时间和精力。

如有进一步疑问或需要具体法律帮助，请直接向我咨询。