单位集资房退回单位时，合法处理的关键在于遵循相关法律法规、单位内部规定以及合同约定，确保程序合法、权益保障。以下是具体处理方式及注意事项：

1. 核查合同与政策依据
   首先需核查集资房的购买合同、单位内部集资建房管理办法以及当地政策文件，明确退房条件、程序及违约责任。例如，合同中可能约定了退房需提前通知的期限、是否需支付违约金、单位是否需退还集资款及利息等。若合同未明确约定，则需依据《民法典》中关于合同履行及解除的规定处理。

2. 与单位协商退房方案
   在符合合同或政策条件的前提下，应与单位协商退房的具体方案，包括：

   • 退房申请：书面提交退房申请，说明退房原因（如工作调动、经济困难等），并附相关证明材料（如调令、收入证明等）。
     
   • 资金结算：明确单位应退还的集资款金额、利息计算方式及支付时间。若合同约定退房需支付违约金，需协商违约金比例或争取减免。
     
   • 房屋交接：办理房屋腾退手续，包括交还钥匙、结清水电燃气等费用，并确保房屋无损坏或欠费。

3. 办理产权变更或注销手续
   若集资房已办理产权证，需与单位共同到不动产登记中心办理产权变更或注销手续，将房屋产权恢复至单位名下。若房屋未办理产权证，则需由单位出具退房证明，并配合办理相关备案注销手续。

4. 注意税务处理
   退房可能涉及税费问题，例如：

   • 契税：若退房发生在契税缴纳后，可依据《契税法》申请退税，但需符合退税条件（如合同解除、房屋未过户等）。
     
   • 个人所得税：若单位支付的退房补偿款属于“财产转让所得”，可能需缴纳个人所得税，但若符合政策规定的免税条件（如因工作调动退房），可申请免税。
     
   • 增值税：若单位将退房再次出售，可能需缴纳增值税，但若符合“满五唯一”等免税条件，可免征。

5. 保留书面证据
   整个退房过程中，务必保留所有书面文件，包括退房申请、协商记录、资金结算凭证、产权变更手续等，以备后续纠纷时作为证据。

风险提示：

• 若单位拒绝退房或拖延退款，可依据合同或政策向劳动仲裁机构或法院提起诉讼，维护自身权益。
  
• 若退房涉及单位违规操作（如未取得集资建房许可、违规分配房屋等），可能面临行政处罚或房屋被收回的风险，需谨慎处理。
  

如有进一步疑问或需要具体操作指导，可直接向我咨询。