针对您提出的“劳务派遣书记员被退回怎么处理”的问题，我将结合相关法律法规和实际案例，为您详细解答。

首先，我们需要明确的是，在劳务派遣关系中，存在两个主体：劳务派遣单位（即与您签订劳动合同的单位）和用工单位（即您实际工作的单位）。当您作为劳务派遣书记员被用工单位退回时，您的劳动关系仍然在劳务派遣单位。

一、被退回的原因及处理

1. 违规被退回：

   • 如果您因违反用工单位的规章制度而被退回，劳务派遣单位在核实情况后，有权根据劳动合同的约定解除与您的劳动关系。但在此情况下，劳务派遣单位需遵守《中华人民共和国劳动合同法》的相关规定，如提前三十日以书面形式通知您，或者额外支付您一个月工资后，方可解除劳动合同。

2. 非违规被退回：

   • 如果您并非因违规而被退回，而是由于用工单位业务调整、岗位撤销等客观原因，那么劳务派遣单位应为您安排新的工作岗位，或者与您协商解除劳动合同，并支付相应的经济补偿。

二、赔偿主体的确定

根据《中华人民共和国劳动合同法》及《劳务派遣暂行规定》等相关法律法规，劳务派遣工被辞退时，其赔偿主体应为劳务派遣单位。这是因为劳务派遣单位作为用人单位，与您之间存在直接的劳动合同关系，应当承担相应的法律责任。

三、具体处理步骤

1. 与劳务派遣单位沟通：

   • 当您被用工单位退回后，首先应与劳务派遣单位进行沟通，了解被退回的具体原因，以及劳务派遣单位对您的后续安排。

2. 协商解除劳动合同：

   • 如果劳务派遣单位提出解除劳动合同，您应与其协商解除的具体事宜，包括经济补偿的金额和支付方式等。

3. 依法主张权益：

   • 如果您认为劳务派遣单位的解除行为违法，或者未按照法律规定支付经济补偿，您可以依法向劳动仲裁机构提起劳动仲裁，主张自己的合法权益。

四、案例参考

以某案例为例，杨某作为劳务派遣员工，因违规被用工单位退回至劳务派遣公司。劳务派遣公司在核实情况后，解除了与杨某的劳动合同，但未额外支付一个月工资。最终，法院判决劳务派遣公司需向杨某支付一个月工资及经济补偿金。这一案例表明，劳务派遣单位在解除劳动合同时，必须遵守相关法律法规，否则将承担法律责任。

综上所述，当您作为劳务派遣书记员被用工单位退回时，应首先与劳务派遣单位进行沟通，了解具体情况并协商后续安排。如果劳务派遣单位提出解除劳动合同，您应依法主张自己的权益，确保获得应有的经济补偿。