劳务派遣工并不是说退就退的。这一结论主要基于以下几个方面的法律考量：

一、法定退回情形

根据《中华人民共和国劳动合同法》及《劳务派遣暂行规定》的相关规定，用工单位只有在被派遣劳动者存在特定情形时，才能将其退回劳务派遣单位。这些情形包括但不限于：

• 在试用期间被证明不符合录用条件；
• 严重违反用人单位的规章制度；
• 严重失职、营私舞弊，给用人单位造成重大损害；
• 同时与其他用人单位建立劳动关系，对完成本单位的工作任务造成严重影响，或者经用人单位提出，拒不改正；
• 以欺诈、胁迫的手段或者乘人之危，使对方在违背真实意思的情况下订立或者变更劳动合同致使劳动合同无效；
• 被依法追究刑事责任等。

若不存在上述法定情形，用工单位和劳务派遣单位均不能随意辞退劳动者。

二、退回后的处理

即便用工单位因法定情形将被派遣劳动者退回，劳务派遣单位也不能随意解除劳动合同。根据《劳务派遣暂行规定》，劳务派遣单位应当视情通过重新派遣、安排待岗或者协商解除劳动合同等方式妥善安置处理。若劳务派遣单位直接解除劳动合同，且没有合法依据，则可能构成违法解除劳动合同，需要承担相应的法律责任。

三、劳动者的权益保护

若劳动者被违法退回或辞退，他们有权要求继续履行劳动合同，或者主张用人单位支付赔偿金。赔偿金的标准通常是经济补偿标准的二倍。因此，劳动者在面对违法退回或辞退时，应积极维护自己的合法权益。

四、实际操作建议

• 要求书面退回通知：若劳动者被退回，应要求用工单位和劳务派遣单位出具书面的、写明具体退回理由的《退回通知书》。这有助于劳动者了解退回的具体原因，并为后续维权提供依据。
• 分析退回理由的合法性：劳动者可以对照相关法律法规，分析用工单位所做的退回决定是否合法。若认为退回决定违法，可以进一步采取维权措施。
• 明确诉请并维权：若劳动者认为自己的合法权益受到侵害，可以明确诉请（如请求恢复劳动关系、主张违法解除的赔偿金等），并通过法律途径进行维权。

总结来看，劳务派遣工并不是说退就退的。用工单位和劳务派遣单位在退回或辞退劳动者时，必须遵循法律规定的条件和程序。若您作为劳务派遣工遇到了被随意退回或辞退的情况，请直接向我咨询，我将根据您的具体情况提供详细的法律建议和帮助。