并非只有业主才能要求物业撤场，但业主通常是最主要的权利主体。以下从不同角度对此问题进行分析：

一、业主的权利基础

根据《物业管理条例》及相关法律法规，业主作为物业的所有权人，享有对物业管理的监督权和参与权。这包括但不限于：

1. 选举与被选举权：业主有权选举业主委员会成员，并有权被选举为业主委员会成员，从而参与物业管理决策。
2. 监督权：业主有权监督物业服务企业的服务质量和收费情况，对物业服务企业的工作提出意见和建议。
3. 解聘权：在特定条件下，如物业服务企业未能履行合同约定的服务义务，业主或业主委员会有权要求物业服务企业撤场，并重新选聘新的物业服务企业。

二、非业主主体的权利与限制

虽然业主是要求物业撤场的主要权利主体，但在某些特定情况下，非业主主体也可能享有一定的权利或影响力：

1. 业主委员会：业主委员会作为业主大会的执行机构，代表业主行使物业管理权利。在业主大会授权下，业主委员会可以要求物业服务企业撤场。但需注意，业主委员会的这一权利来源于业主大会的授权，而非其自身固有。
2. 租户或其他物业使用人：租户或其他物业使用人虽然不直接拥有物业所有权，但在租赁合同或使用协议中，可能约定了与物业管理相关的权利和义务。然而，这些权利通常限于对物业服务质量的监督和投诉，并不直接包括要求物业撤场的权利。
3. 政府相关部门：在特定情况下，如物业服务企业存在严重违法行为或危害公共安全等情形，政府相关部门（如房管部门、城管部门等）有权依法对物业服务企业进行处罚，甚至要求其撤场。但这一权利属于行政监管范畴，与业主或业主委员会的要求物业撤场性质不同。

三、实际操作中的注意事项

1. 合同约定：在要求物业撤场前，应仔细审查物业服务合同中的相关条款，确保自身权利的行使符合合同约定。
2. 法定程序：如需通过法律途径要求物业撤场，应遵循法定程序，如召开业主大会、形成有效决议、向物业服务企业发出书面通知等。
3. 证据收集：在要求物业撤场的过程中，应收集并保存相关证据，如物业服务企业的违约行为记录、业主大会决议等，以备不时之需。

总结来说，虽然业主是要求物业撤场的主要权利主体，但在特定情况下，业主委员会、政府相关部门等也可能享有一定的权利或影响力。然而，无论何种情况，都应遵循法律法规和合同约定，确保自身权利的行使合法合规。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。