不能直接“开除”物业，但可以通过合法途径更换或解聘物业服务企业。

在物业管理中，业主或业主委员会对物业服务企业的服务质量和表现有监督权。如果物业服务企业不负责任或服务质量差，业主或业主委员会可以采取一系列措施来维护自身权益，包括但不限于更换或解聘物业服务企业。

具体来说，如果业主或业主委员会认为物业服务企业不负责任，可以先通过沟通、协商等方式尝试解决问题。如果协商无果，业主或业主委员会可以根据《物业管理条例》等相关法律法规的规定，通过召开业主大会或业主委员会会议，按照法定程序进行表决，决定是否更换或解聘物业服务企业。

在更换或解聘物业服务企业的过程中，需要注意以下几点：

1. 依法依规进行：必须遵循相关法律法规和小区业主大会议事规则的规定，确保程序的合法性和有效性。
2. 充分沟通协商：在决定更换或解聘前，应与物业服务企业进行充分沟通，尝试通过协商解决问题，避免不必要的纠纷。
3. 做好交接工作：在更换或解聘物业服务企业后，应确保新、老物业服务企业之间的顺利交接，保障小区物业管理的连续性和稳定性。

总之，虽然不能直接“开除”物业，但业主或业主委员会可以通过合法途径更换或解聘不负责任的物业服务企业，以维护自身和小区的整体利益。如果你在这个过程中遇到任何法律问题或需要进一步的法律建议，可以直接向我咨询。