被派遣劳务干了5年被退回，劳动者可按以下步骤处理，具体分情况说明：

1. 确认退回是否合法
   根据《劳动合同法》第65条，用工单位（实际工作单位）退回劳务派遣工需符合法定情形，如：

   • 劳动者不能胜任工作，经培训或调岗后仍不能胜任；
     
   • 劳动者严重违反用工单位规章制度；
     
   • 客观情况发生重大变化（如用工单位破产、业务转移等），导致原岗位无法继续；
     
   • 劳动者患病或非因工负伤，医疗期满后不能从事原工作或新安排的工作。
     若用工单位无法证明退回合法性（如未提供培训记录、未举证违规行为等），则属于违法退回，劳动者可主张赔偿。
     

2. 区分退回后的处理方式

   • 情况一：劳务派遣单位（用人单位）未解除劳动合同
     若派遣单位未与劳动者解除合同，仅将劳动者退回，则双方劳动关系仍存续。此时：

     • 派遣单位应按当地最低工资标准支付劳动者生活费（如北京为最低工资的70%），并继续缴纳社保；
       
     • 劳动者可要求派遣单位重新安排工作，或协商解除合同并主张经济补偿（工作5年可获5个月工资补偿）。
       

   • 情况二：劳务派遣单位解除劳动合同
     若派遣单位以“客观情况重大变化”“劳动者被退回”等理由解除合同，需满足：

     • 提前30日书面通知或支付1个月工资代通知金；
       
     • 支付经济补偿（工作5年可获5个月工资）；
       
     • 若派遣单位无法证明解除合法性（如未与劳动者协商变更合同内容），则属于违法解除，劳动者可主张2倍经济补偿的赔偿金（即10个月工资）。
       

3. 维权途径

   • 协商：与派遣单位、用工单位沟通，要求说明退回理由、处理方案，并留存书面证据（如邮件、录音）；
     
   • 投诉：向当地劳动监察大队举报（如未支付生活费、未缴纳社保等）；
     
   • 仲裁/诉讼：若协商、投诉无果，可申请劳动仲裁，主张违法退回赔偿、违法解除赔偿金等；对仲裁结果不服的，可向法院起诉。
     

建议：

• 保留劳动合同、派遣协议、工资条、退回通知等证据；
  
• 尽快咨询专业律师，根据具体证据和当地政策制定维权方案（如是否主张继续履行合同或赔偿）。
  

如有进一步疑问（如证据收集、赔偿计算等），可直接向我咨询。