结论前置：用人单位退回派遣员工是否能得到赔偿，主要取决于退回的具体原因、是否符合法律规定及合同约定，以及劳务派遣单位和用工单位的后续处理行为。以下是对此问题的详细分析：

一、无需赔偿的情况

1. 劳动者自身原因：

   • 根据《中华人民共和国劳动合同法》第三十九条，若劳动者在试用期间被证明不符合录用条件；严重违反用人单位的规章制度；严重失职，营私舞弊，给用人单位造成重大损害；同时与其他用人单位建立劳动关系，对完成本单位工作任务造成严重影响，或者经用人单位提出，拒不改正；以欺诈、胁迫的手段或者乘人之危，使对方在违背真实意思的情况下订立或者变更劳动合同；被依法追究刑事责任等情形，用工单位可将劳动者退回劳务派遣单位，且无需支付经济补偿或赔偿金。

2. 合法的约定原因：

   • 如派遣协议期满终止等基于合法约定的原因，用工单位将劳动者退回派遣单位，也通常无需赔偿。

3. 劳务派遣单位重新派遣：

   • 当劳动者被依法退回后，劳务派遣单位如积极履行职责，在合理时间内为劳动者安排新的工作岗位，且不存在违法解除劳动合同等情况，一般不需要向劳动者赔偿。

二、可能需要赔偿的情况

1. 用工单位违反法律规定：

   • 若用工单位无正当理由随意退回劳动者，或在劳动者没有过错且不符合法定退回情形时退回，可能需承担相应责任。虽然通常是由用工单位向劳务派遣单位承担违约责任，但若因此给劳动者造成损害，用工单位与劳务派遣单位需承担连带赔偿责任。

2. 劳务派遣单位违法解除：

   • 若劳务派遣单位在劳动者被退回后，无正当理由解除与劳动者的劳动合同，属于违法解除。根据《中华人民共和国劳动合同法》第四十七条及第八十七条，劳务派遣单位应依照经济补偿标准的二倍向劳动者支付赔偿金。经济补偿按劳动者在用工单位工作的年限计算，每满一年支付一个月工资的标准向劳动者支付。六个月以上不满一年的，按一年计算；不满六个月的，向劳动者支付半个月工资的经济补偿。这里的月工资是指劳动者在劳动合同解除或者终止前十二个月的平均工资。若劳动者的月工资高于所在直辖市、设区的市级人民政府公布的本地区上年度职工月平均工资三倍的，向其支付经济补偿的标准按职工月平均工资三倍的数额支付，且向其支付经济补偿的年限最高不超过十二年。

三、维权建议

1. 保留证据：

   • 劳动者应妥善保存与用工单位及劳务派遣单位之间的劳动合同、工资单、考勤记录、退回通知等相关证据，以备不时之需。

2. 协商解决：

   • 劳动者可首先尝试与劳务派遣单位和用工单位进行协商，明确赔偿金额和支付主体。

3. 法律途径：

   • 如协商无果，劳动者可向劳动争议仲裁委员会申请仲裁，或直接向人民法院提起诉讼，以维护自身合法权益。

综上所述，用人单位退回派遣员工是否能得到赔偿，需综合考虑退回原因、法律规定及合同约定等多个因素。在面对此类问题时，劳动者应了解自己的权益和维权途径，并妥善保存相关证据。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。