在刑事诈骗案件中，关于何时与对方谈退赔，并没有一个绝对固定的时间点，但通常建议在以下几个阶段考虑与对方进行退赔协商：
侦查阶段：
- 情况说明：在案件侦查阶段，如果犯罪嫌疑人或其家属意识到退赔可能对案件处理有积极影响，可以主动与被害人或其家属联系，表达退赔意愿。此时，退赔可能有助于缓解被害人的情绪，减少社会矛盾，同时也可能对犯罪嫌疑人的取保候审等侦查阶段措施产生积极影响。
- 法律建议：在此阶段，建议犯罪嫌疑人或其家属在律师的陪同下与被害人或其家属进行协商，确保退赔协议的合法性和有效性，并避免在协商过程中泄露过多案件信息或做出不恰当的承诺。
审查起诉阶段：
- 情况说明：在案件进入审查起诉阶段后，检察机关会对案件进行全面审查，包括犯罪嫌疑人的犯罪事实、情节、社会危害性以及退赔情况等。此时，如果犯罪嫌疑人或其家属能够积极退赔，可能有助于争取检察机关的从宽处理建议，如不起诉或建议适用缓刑等。
- 法律建议：在此阶段，建议犯罪嫌疑人或其家属在律师的协助下，与检察机关或被害人进行沟通，表达退赔意愿，并提交相关的退赔证据材料。同时，要关注检察机关对退赔情况的审查意见，以便及时调整退赔策略。
审判阶段：
- 情况说明：在案件进入审判阶段后，法院会根据犯罪嫌疑人的犯罪事实、情节、社会危害性以及退赔情况等因素，综合考量后作出判决。如果犯罪嫌疑人或其家属在审判阶段能够积极退赔，可能有助于减轻刑罚或争取缓刑等从宽处理。
- 法律建议：在此阶段，建议犯罪嫌疑人或其家属在律师的指导下，与法院或被害人进行协商，制定合理的退赔计划，并确保退赔的及时性和有效性。同时，要关注法院对退赔情况的认定和处理意见，以便在判决后及时履行退赔义务。
在谈退赔时，还需要注意以下几点：
- 退赔的合法性：确保退赔的资金来源合法，避免使用非法所得进行退赔，否则可能构成新的犯罪或加重原有罪责。
- 退赔的自愿性：退赔应当是犯罪嫌疑人或其家属的自愿行为，不得强迫或诱导被害人接受不合理的退赔条件。
- 退赔的证据保留：在退赔过程中，要保留好相关的证据材料，如退赔协议、转账记录、收据等，以便在后续的法律程序中证明退赔的事实和金额。
若在退赔过程中遇到任何法律问题或困惑，可以直接向我咨询。我会根据你的具体情况，为你提供专业的法律建议和帮助。