结论前置：劳务派遣工在用人单位工作了十年被退回，是否有赔偿以及赔偿的主体，主要取决于退回和辞退的原因。以下是具体分析：
一、违法退回或辞退情形
情形描述：
- 若用工单位违法退回被派遣劳动者，且派遣单位据此解除劳动合同，这构成违法辞退。
- 若派遣单位无合法理由直接辞退员工，同样构成违法辞退。
赔偿标准：
- 根据《中华人民共和国劳动合同法》第八十七条，用人单位（在此情况下为劳务派遣单位）需按经济补偿标准的二倍向劳动者支付赔偿金。
- 经济补偿标准按《中华人民共和国劳动合同法》第四十七条计算，即每满一年支付一个月工资，工作十年则应支付十个月工资作为经济补偿。因此，违法辞退的赔偿金为二十个月工资。
- 月工资计算基于劳动合同解除或终止前十二个月的平均工资。若劳动者月工资高于用人单位所在直辖市、设区的市级人民政府公布的本地区上年度职工月平均工资三倍的，支付经济补偿的标准按职工月平均工资三倍的数额支付，且支付经济补偿的年限最高不超过十二年。
赔偿主体：劳务派遣单位。
二、合法但无过失性退回或辞退情形
情形描述：
- 因劳动合同订立时的客观情况发生重大变化导致合同无法履行，且双方未能就变更合同内容达成协议，用工单位退回员工，派遣单位据此解除劳动合同。
- 劳动者患病或非因工负伤后不能从事原工作及另行安排的工作，或劳动者不能胜任工作且经培训或调整岗位后仍不能胜任，用工单位退回员工，派遣单位据此解除劳动合同。
- 用工单位进行经济性裁员等合法原因退回员工。
赔偿标准：
- 按照《中华人民共和国劳动合同法》第四十七条，劳务派遣单位需按劳动者在本单位工作的年限支付经济补偿金。每满一年支付一个月工资，工作十年则应支付十个月工资的经济补偿金。
- 月工资计算同样基于劳动合同解除或终止前十二个月的平均工资，且受上述三倍工资和十二年年限的限制。
赔偿主体：劳务派遣单位。
三、劳动者存在过错情形
情形描述：
- 劳动者存在《中华人民共和国劳动合同法》第三十九条规定的过错情形，如严重违反用人单位规章制度、严重失职给用人单位造成重大损害等。
赔偿情况：
- 在此情况下，用工单位可以退回员工，且劳务派遣单位可以解除劳动合同且无需支付任何经济补偿或赔偿金。
四、其他注意事项及维权途径
- 责任主体：在劳务派遣关系中，支付赔偿责任的主体一般为劳务派遣单位。但若用工单位给被派遣劳动者造成损害，劳务派遣单位与用工单位需承担连带赔偿责任。
- 维权途径：
- 协商解决：首先尝试与劳务派遣单位和用工单位进行协商，要求其按照法律规定支付赔偿。
- 劳动监察投诉：若协商不成，可向当地劳动监察部门投诉，由劳动监察部门对用人单位进行监督检查并责令改正违法行为。
- 劳动仲裁：如仍无法解决，可向劳动争议仲裁委员会申请仲裁，要求派遣单位支付赔偿金。对仲裁裁决不服的，可在规定时间内向人民法院提起诉讼。
建议：劳务派遣员工在面临退回或辞退时，应明确退回或辞退原因并判断用人单位行为是否合法。若认为自身权益受损，可及时采取上述维权途径维护合法权益。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。