用工单位退回派遣员工是否需要赔偿，主要取决于退回的具体原因、是否符合法律规定及合同约定，以及劳务派遣单位和用工单位的后续处理行为。以下是对这一问题的详细分析：
一、无需赔偿的情况
劳动者自身原因：
- 根据《中华人民共和国劳动合同法》第三十九条，若劳动者在试用期间被证明不符合录用条件；严重违反用人单位的规章制度；严重失职，营私舞弊，给用人单位造成重大损害；同时与其他用人单位建立劳动关系，对完成本单位工作任务造成严重影响或拒不改正；以欺诈、胁迫手段或乘人之危订立或变更劳动合同致使合同无效；被依法追究刑事责任，用工单位可将劳动者退回劳务派遣单位，且无需支付经济补偿或赔偿金。
合法的约定原因：
- 如派遣协议期满终止等基于合法约定的原因，用工单位将劳动者退回派遣单位，也通常无需赔偿。
劳务派遣单位重新派遣：
- 当劳动者被依法退回后，劳务派遣单位如积极履行职责，在合理时间内为劳动者安排新的工作岗位，且不存在违法解除劳动合同等情况，一般不需要向劳动者赔偿。
二、可能需要赔偿的情况
用工单位违反法律规定：
- 若用工单位无正当理由随意退回劳动者，或在劳动者没有过错且不符合法定退回情形时退回，可能需承担相应责任。虽通常是由用工单位向劳务派遣单位承担违约责任，但若因此给劳动者造成损害，用工单位与劳务派遣单位需承担连带赔偿责任。
劳务派遣单位违法解除：
- 若劳务派遣单位在劳动者被退回后，无正当理由解除与劳动者的劳动合同，属于违法解除。根据《中华人民共和国劳动合同法》，劳务派遣单位应依照经济补偿标准的二倍向劳动者支付赔偿金。
三、经济补偿的计算方式（如适用）
- 依据《中华人民共和国劳动合同法》第四十七条，经济补偿按劳动者在用工单位工作的年限计算，每满一年支付一个月工资的标准向劳动者支付。六个月以上不满一年的，按一年计算；不满六个月的，向劳动者支付半个月工资的经济补偿。
- 劳动者月工资高于用人单位所在直辖市、设区的市级人民政府公布的本地区上年度职工月平均工资三倍的，向其支付经济补偿的标准按职工月平均工资三倍的数额支付，向其支付经济补偿的年限最高不超过十二年。
- 本条所称月工资是指劳动者在劳动合同解除或者终止前十二个月的平均工资。
四、其他注意事项
劳务派遣单位的责任：
- 劳务派遣单位作为用人单位，有义务为劳动者缴纳社保、支付工资等。在劳务派遣工被退回后待业期间，应按照不低于当地最低工资标准支付工资。
劳务纠纷的处理：
- 发生劳务纠纷时，双方可通过协商、申请劳动仲裁或提起诉讼等方式解决。建议妥善保存相关证据，如劳动合同、工资单、考勤记录等，以备不时之需。
总结与建议：用工单位退回派遣员工是否需要赔偿，是一个涉及多方面因素的问题。在面对此类问题时，建议您首先明确退回的具体原因，并对照相关法律法规及合同约定进行判断。如有任何疑问或需要进一步的法律帮助，请随时向我咨询，我会根据您的具体情况提供详细的法律建议。