物业工作人员违规时，有权解聘的部门主要取决于物业工作人员的雇佣关系及物业管理模式，一般情况下，业主委员会或相关物业管理机构有权根据规定解聘违规的物业工作人员。以下从不同角度进行详细分析：

1. 业主委员会的解聘权

• 法律依据：根据《物业管理条例》的相关规定，业主大会或者业主委员会有权选聘和解聘物业服务企业。虽然直接规定的是物业服务企业，但在实际操作中，若物业工作人员是物业服务企业雇佣的，且其违规行为严重影响了物业服务质量和业主权益，业主委员会可以通过要求物业服务企业解聘该工作人员来维护自身权益。
• 实际操作：业主委员会在发现物业工作人员违规后，应首先与物业服务企业沟通，要求其采取措施纠正违规行为或解聘违规工作人员。若物业服务企业未采取有效措施，业主委员会可以进一步采取行动，如召开业主大会讨论解聘物业服务企业或采取其他合法手段维护权益。

2. 物业服务企业的解聘权

• 雇佣关系：若物业工作人员是物业服务企业直接雇佣的，那么物业服务企业作为雇主，有权根据劳动合同和相关规定解聘违规的工作人员。
• 解聘程序：物业服务企业在解聘违规工作人员时，应遵循劳动合同和相关法律法规的规定，确保解聘程序的合法性和公正性。例如，应提前通知工作人员，说明解聘原因，并办理相关离职手续。

3. 特殊情况下的解聘权

• 政府监管：在某些特殊情况下，如物业工作人员的违规行为涉及违法犯罪或严重违反行业规范，政府相关部门（如房管部门、城管部门等）可能介入调查，并要求物业服务企业解聘该工作人员。
• 业主共同决定：在业主自治的小区中，若物业工作人员的违规行为严重影响了业主的共同利益，业主可以通过共同决定的方式要求物业服务企业解聘该工作人员。这通常需要通过业主大会或业主委员会进行表决。

法律建议

• 保留证据：在发现物业工作人员违规后，业主或业主委员会应保留相关证据，如照片、视频、证人证言等，以便在需要时证明违规行为的存在。
• 合法维权：在解聘物业工作人员的过程中，应确保所有行动都符合法律法规的规定，避免采取过激或违法的手段。
• 及时沟通：业主或业主委员会应与物业服务企业保持及时沟通，共同协商解决违规问题，以维护小区的和谐稳定。

若您遇到物业工作人员违规的情况，且不清楚如何处理，可以直接向我咨询，我会根据您的具体情况提供专业的法律建议。