核心结论：被害人协商退赃时，需根据案件所处阶段（侦查阶段、审查起诉阶段、审判阶段）及退赃性质（主动退赃、被动退赃）采取不同策略，同时需注意保留证据、签订书面协议、避免被利用等关键事项。以下为具体分析：

一、根据案件阶段协商退赃

1. 侦查阶段
   若案件尚在公安机关侦查阶段，被害人可主动联系办案民警或通过律师协助，向犯罪嫌疑人或其家属提出退赃要求。此时退赃可能影响犯罪嫌疑人的逮捕必要性审查，若退赃积极且认罪态度好，公安机关可能变更强制措施（如取保候审）。
   操作建议：要求犯罪嫌疑人或家属出具书面《退赃承诺书》，明确退赃金额、方式及时间，并留存转账记录、收条等证据。若涉及多人犯罪，需明确退赃份额，避免后续纠纷。

2. 审查起诉阶段
   案件移送检察院后，被害人可向检察官表达退赃意愿。此时退赃可能影响量刑建议，若犯罪嫌疑人全额退赃并认罪认罚，检察院可能提出从宽处理的建议（如缓刑或较轻刑期）。
   操作建议：通过律师与检察官沟通，确保退赃金额被计入《认罪认罚具结书》，并要求检察院在起诉书中明确退赃情节。若犯罪嫌疑人家属代为退赃，需签订《代为退赃协议》，避免被认定为“赃款转移”。

3. 审判阶段
   法院审理期间，被害人可向法官提交《退赃申请书》，说明退赃对量刑的影响。若犯罪嫌疑人在庭审前退赃，法院可能酌情从轻处罚；若庭审后退赃，虽不影响定罪，但可能影响罚金刑或缓刑适用。
   操作建议：要求法院出具《退赃接收凭证》，并保留退赃资金流向的银行流水。若犯罪嫌疑人无力全额退赃，可协商分期退赔，并要求法院在判决书中明确分期退赔的期限及违约责任。

二、根据退赃性质协商退赃

1. 主动退赃
   若犯罪嫌疑人自愿退赃，被害人可与其签订《刑事和解协议》，明确退赃金额、赔偿范围（如医疗费、误工费等）及谅解意愿。根据《刑事诉讼法》第288条，若犯罪嫌疑人可能判处三年以下有期徒刑，且取得被害人谅解，双方可申请刑事和解，公安机关、检察院、法院应依法从宽处理。
   操作建议：协议中需注明“退赃不免除民事赔偿责任”，避免犯罪嫌疑人以退赃为由拒绝后续民事赔偿。同时，要求犯罪嫌疑人出具《悔过书》，作为其认罪态度的证据。

2. 被动退赃
   若犯罪嫌疑人被公安机关追缴赃款（如冻结银行账户、查封财产），被害人需配合办案机关完成退赔程序。此时退赃金额可能优先用于退赔被害人损失，剩余部分上缴国库。
   操作建议：向办案机关提交《损失清单》及证据（如合同、转账记录），确保退赔金额覆盖实际损失。若退赃不足，可另行提起民事诉讼要求赔偿。

三、协商退赃的注意事项

1. 保留证据：所有退赃行为需留存书面证据（如协议、收条、转账记录），避免口头约定。
   
2. 签订书面协议：明确退赃金额、用途、时间及违约责任，防止犯罪嫌疑人反悔。
   
3. 避免被利用：若犯罪嫌疑人家属以“退赃换谅解”为由要求被害人出具《谅解书》，需谨慎评估其诚意，避免因谅解书影响后续民事赔偿。
   
4. 律师协助：复杂案件（如涉及多人犯罪、巨额财产）建议委托律师参与协商，确保退赃程序合法合规。

若您在协商退赃过程中遇到具体问题（如犯罪嫌疑人不履行协议、办案机关推诿等），可直接向我咨询，我会结合案件细节为您提供进一步建议。