刑事案件中的退赔由人民法院来主张并执行。具体分析如下：

1. 执行主体：

   • 根据《最高人民法院关于刑事裁判涉财产部分执行的若干规定》，刑事裁判涉财产部分的执行，包括责令退赔，由第一审人民法院负责。这意味着，如果被告人在刑事案件中被判定需要向受害人进行退赔，那么该退赔义务的执行将由作出判决的第一审人民法院来具体负责。

2. 执行措施：

   • 人民法院在执行过程中，有权采取多种强制措施，如查询、冻结、划拨被执行人的存款，扣留、提取被执行人的收入，以及查封、扣押、拍卖、变卖被执行人的财产等，以确保退赔义务的履行。
   • 若被执行人拒不执行，人民法院还有权采取罚款、拘留等强制措施，甚至追究其刑事责任。

3. 执行流程：

   • 刑事判决生效后，刑事审判部门会及时将刑事裁判涉财产部分移送立案部门审查立案，再由立案部门移送执行机构执行。
   • 执行机构在接到执行任务后，会按照法定程序开展执行工作，包括调查被执行人的财产状况，采取相应的执行措施等。

4. 被害人权利：

   • 被害人作为退赔的权利人，有权了解执行的进展情况，并在发现被执行人有可供执行的财产线索时，及时提供给执行法院，以协助执行工作的开展。

5. 特殊情况：

   • 如果被执行人的财产不足以支付全部退赔金额，人民法院会按照法定的执行顺序进行分配，其中退赔被害人的损失优先于其他民事债务和罚金等。
   • 若被告人的近亲属自愿代为退赔，法律也不禁止，这在一定程度上可视为被告人悔罪表现，对量刑可能产生影响。

综上所述，刑事案件中的退赔由人民法院来主张并执行，通过一系列的执行措施和流程，确保被害人的合法权益得到保障。如果您在刑事案件中涉及退赔问题，可以直接向我咨询，我会为您提供专业的法律帮助。