退回劳务派遣工不能直接口头通知，应当采用书面形式。以下是对此问题的详细分析：

一. 退回劳务派遣工的通知形式

1. 法律未明确规定具体形式：在《劳动合同法》和《劳务派遣暂行规定》中，并未直接规定退回被派遣劳动者时需要采用何种形式进行通知。但考虑到劳动关系的严肃性和法律性，以及通知可能产生的法律后果，书面形式是更为稳妥和恰当的选择。
2. 口头通知的法律风险：口头通知虽然便捷，但缺乏书面证据，一旦发生争议，难以证明用工单位是否已经履行了通知义务，以及通知的具体内容。这可能会给用工单位带来不必要的法律风险。

二. 为什么建议采用书面形式

1. 保障劳动者权益：书面形式能够确保劳动者收到明确、具体的通知，了解其被退回的原因和后续安排，从而保障劳动者的知情权和合法权益。
2. 避免法律纠纷：在发生劳动争议时，书面通知可以作为有力证据，证明用工单位已经按照法律规定履行了通知义务，避免因此产生的法律纠纷。
3. 符合法律原则：虽然法律未明确规定通知形式，但根据法律原则，用工单位在退工时应当遵循公平、公正、公开的原则，书面通知更符合这一原则。

三. 书面通知的具体要求

1. 内容明确：书面通知应当明确说明退工的原因、依据、时间以及后续安排等关键信息。
2. 送达方式：应当采用能够确保劳动者收悉的方式送达，如直接送达、邮寄送达或电子送达等。
3. 保留证据：用工单位应当保留书面通知的送达证据，以备不时之需。

我建议用工单位在退回劳务派遣工时，务必采用书面形式进行通知，以确保通知的合法性和有效性。如有进一步需要，您可以继续咨询我。