在交通事故中，如果全责方垫付了医药费，受害人是否可以要求保险公司退给受害者，这个问题涉及多个方面，包括责任划分、保险理赔以及双方的协商或法律判决等。

首先，从责任划分的角度来看，如果事故责任认定书中明确全责方承担全部责任，那么全责方垫付的医药费通常作为赔偿的一部分，不需要退还。这部分费用将由全责方承担，或者通过其购买的保险进行理赔。

其次，关于保险理赔，如果全责方购买了交强险和商业三者险，且垫付的医药费在保险理赔范围内，那么保险公司会直接支付给伤者或全责方（如果全责方已垫付）。在这种情况下，全责方无需再向伤者支付该笔费用，也不存在退还问题。但如果垫付金额超过保险理赔范围，超出部分可能需要全责方自行承担。

此外，双方还可以通过私下和解或交警部门调解的方式解决赔偿问题。如果双方就医药费及其他赔偿达成一致意见，并签订了书面协议，那么应按照协议履行。协议中可能会约定医药费的退还事宜，需按照约定执行。

最后，如果双方无法就赔偿问题达成一致意见，可以通过诉讼方式解决。法院将根据事故责任认定书、医疗证明等相关证据进行判决。判决结果将决定医药费的最终承担方，以及是否需要退还已垫付的费用。

综上所述，受害人是否可以要求保险公司退还全责方垫付的医药费，取决于具体的责任划分、保险理赔情况以及双方的协商或法律判决。在实际操作中，建议双方首先进行友好协商，并咨询专业律师或保险公司的意见，以维护自身权益。