为了让劳务服务公司快速退回违规收取的中介费，您可以按照以下步骤操作：

一、明确退款事由并收集证据

首先，您需要明确劳务服务公司违规收取中介费的具体事由。这可能包括但不限于：未按照合同约定提供服务、收取的费用超出合同约定的金额、或者存在欺诈、胁迫等导致合同可撤销的情形。

在明确退款事由后，接下来的一步是收集相关证据。这些证据可能包括：合同文本、付款凭证（如银行转账记录、收据等）、与劳务服务公司的沟通记录（如电话录音、短信、电子邮件等），以及任何能够证明劳务服务公司违规收费的其他证据。

二、与劳务服务公司协商

在收集到足够的证据后，您可以尝试与劳务服务公司进行协商，要求其退还违规收取的中介费。在协商过程中，您可以向劳务服务公司展示您收集到的证据，并明确表达您的退款要求。如果劳务服务公司同意退款，那么问题就可以得到快速解决。

三、向相关部门投诉或申请仲裁

如果与劳务服务公司的协商没有结果，您可以考虑向相关部门投诉或申请仲裁。具体来说，您可以向当地的劳动监察部门或市场监管部门投诉，请求他们介入调查并调解退款事宜。这些部门通常会对劳务服务公司的行为进行调查，并在发现违规行为后要求其进行整改和退款。

另外，如果您与劳务服务公司之间签订了仲裁协议，您也可以根据协议向仲裁机构申请仲裁。仲裁机构会根据双方提供的证据和合同约定进行裁决，要求劳务服务公司退还违规收取的中介费。

四、向法院提起诉讼

如果以上方法都没有奏效，那么您可以考虑向法院提起诉讼来维护自己的权益。在提起诉讼前，请确保您已经收集了足够的证据来支持您的主张。在诉讼过程中，您需要向法院提交起诉状和证据材料，并按照法院的要求进行庭审和辩论。如果法院认定劳务服务公司存在违规行为，那么它会判决劳务服务公司退还违规收取的中介费，并可能要求其承担其他相应的法律责任。

五、注意事项

在处理此类问题时，请务必保持冷静和理性。同时，您还需要注意以下几点：

1. 保留好所有与劳务服务公司的沟通记录和证据材料，以便在需要时进行查阅和提交。
2. 在与劳务服务公司协商或向相关部门投诉时，要清晰、明确地表达自己的诉求和理由。
3. 如果需要提起诉讼，请务必咨询专业律师的意见，并按照律师的指导进行诉讼操作。

通过以上步骤，您应该能够有效地让劳务服务公司快速退回违规收取的中介费。