县政府确实有拆除违法建筑的权利，但这一权利的行使需严格遵循法定条件与程序。以下从不同角度详细阐述：
一、法律依据与权力赋予
根据《中华人民共和国城乡规划法》的相关规定，县级以上地方人民政府城乡规划主管部门对违法建筑具有查处和拆除的权力。具体来说：
城乡规划主管部门的职责：
- 认定违法建筑：对于未取得建设工程规划许可证或者未按照建设工程规划许可证的规定进行建设的，城乡规划主管部门有权责令停止建设，并根据情况作出限期改正、限期拆除或没收实物等决定。
- 作出拆除决定：在认定违法建筑后，城乡规划主管部门有权依法作出责令限期拆除的决定。
县级以上地方人民政府的权力：
- 责成有关部门拆除：若当事人逾期不拆除违法建筑，县级以上地方人民政府可以责成有关部门（如城市管理行政执法部门）采取查封施工现场、强制拆除等措施。
- 组织强制拆除：在某些情况下，县级以上地方人民政府也可能直接组织相关部门进行强制拆除。
二、权力行使的具体条件与步骤
违法建设的认定：
- 县政府或其城乡规划主管部门需依据相关法律法规及规划要求，对建设行为的合法性进行准确判断。这要求具备相应的法律知识和规划识别能力，以确保判断的准确性和权威性。
- 核心在于核实建设项目是否已取得必要的许可文件，以及是否符合规划的具体条件。
责令停止建设与限期改正：
- 一旦认定为违法建设，县政府或其城乡规划主管部门应立即责令建设者停止违法行为，并给出具体的改正期限。例如，对于未按照建设工程规划许可证规定进行的建设，应指导建设者按许可内容进行调整，以符合规划要求。
依法拆除的程序：
- 催告程序：作为拆除前的必要步骤，县政府或其相关部门需向当事人发出催告通知，要求其在规定期限内自行拆除违法建设，明确告知逾期将面临强制执行的法律后果。
- 强制执行决定：若当事人逾期未改正，县政府或其相关部门可作出强制执行决定，详细列明拆除的时间、方式等具体执行细节。
- 公告公示：为确保公众的知情权与监督权，县政府或其相关部门需向社会公开拆除事项，通过公告形式公布相关信息。
三、权限范围与超越权限的处理
- 权限范围：县政府主要对城市规划区内的违法建设具有查处和拆除的权力。对于乡、村庄规划区内的违法建设，则由乡镇政府负责查处与处理。
- 超越权限的后果：若县政府超出其法定权限实施拆除，当事人有权通过行政复议、行政诉讼等法律途径维护自身合法权益，确保行政行为的合法性与正当性。
四、实际应用与注意事项
在实际操作中，县政府应加强与城乡规划主管部门的协调沟通，确保执法活动的准确性、合法性与有效性。同时，对于跨越其管辖范围的违法建设，应及时上报并协助上级部门进行查处。此外，县政府在行使拆除权力时，应充分尊重当事人的合法权益，确保拆除程序的公正、透明和合法。
总结与建议：县政府确实有拆除违法建筑的权利，但这一权利的行使必须严格遵循法定条件与程序。如果您面临违法建筑拆除的问题，或者对拆除程序有疑问，可以直接向我咨询，我将根据您的具体情况提供详细的法律建议。