若合伙非法集资案件中一方退还了非法所得，处理方式需分情况讨论，具体如下：

1. 刑事责任层面
   非法集资属于刑事犯罪，退还非法所得（即退赃）是量刑时的从轻情节，但不免除刑事责任。根据《刑法》第176条（非法吸收公众存款罪）和第192条（集资诈骗罪），退赃可能影响最终刑期，但不会改变犯罪定性。例如：

   • 若一方主动退还全部非法所得，法院可能酌情减轻处罚（如从“三年以上十年以下有期徒刑”降至“三年以下有期徒刑”）；
     
   • 若仅部分退还，退赃部分可能作为量刑参考，但剩余未退还部分仍需追缴。
     关键点：退赃是量刑情节，非“免罪金牌”，需结合犯罪情节、主观恶性等综合判断。

2. 民事赔偿层面
   非法集资案件中，投资者（被害人）的损失需通过刑事附带民事诉讼或单独民事诉讼追偿。退还的非法所得会优先返还给投资者，但需注意：

   • 若退还金额不足以覆盖全部损失，退赃方需与其他合伙人按比例承担连带赔偿责任；
     
   • 若一方退还后，其他合伙人未退还，退赃方可向其他合伙人追偿其应承担的份额（需以合伙协议或法律规定为依据）。
     示例：若三人合伙非法集资100万元，A退还30万元后，剩余70万元需由B、C共同退还；若B、C无力退还，A可能需先垫付，再向B、C追偿。

3. 行政处罚层面
   若非法集资行为涉及行政违法（如未取得金融许可），退还非法所得可能影响行政处罚力度，但不会完全免除处罚。例如：

   • 银保监会可能对退赃方从轻处罚（如降低罚款金额），但仍会采取责令整改、吊销执照等措施；
     
   • 若退赃后仍存在其他违法行为（如虚假宣传），行政处罚可能叠加。

行动建议：

• 若您是退赃方，需保留退赃凭证（如转账记录、收据），并主动向公安机关或法院说明情况，争取从轻处理；
  
• 若您是投资者，需及时向办案机关申报损失，并关注退赃资金分配情况；
  
• 若涉及合伙纠纷，建议梳理合伙协议、资金流向等证据，明确各方责任比例。
  

提示：非法集资案件通常涉及刑事、民事、行政多重法律关系，处理需结合具体案情。如有进一步疑问，可直接向我咨询细节。