结论：受害者是否需要把肇事者司机垫付的五百块赔给他，这主要取决于这五百块在事故赔偿中的性质以及双方的责任划分，一般情况下，如果这五百块是肇事者司机预先支付的部分赔偿款，受害者无需再赔给他；但如果这五百块是肇事者司机出于人道主义或其他原因的借款或额外支付，且后续赔偿中未涵盖此部分，则可能需要根据具体情况处理。
分析说明：
如果五百块是预先支付的部分赔偿款：
- 在交通事故中，肇事者司机有时会预先支付一部分费用给受害者，作为对后续赔偿的预支或部分履行。这种情况下，这五百块应被视为肇事者司机对受害者的赔偿款的一部分。
- 如果后续通过协商、调解或诉讼确定了总的赔偿金额，并且这五百块已经包含在内，那么受害者无需再将这五百块赔给肇事者司机。
如果五百块是借款或额外支付：
- 如果肇事者司机支付的五百块并非作为赔偿款，而是出于人道主义援助、借款或其他原因，且双方有明确的约定或证据表明这一点，那么这五百块的性质就不同了。
- 在这种情况下，如果后续赔偿中并未涵盖这五百块，且肇事者司机要求返还，受害者可能需要根据双方的约定或法律规定来处理。如果双方没有约定，且无法证明这五百块是赔偿款的一部分，那么受害者可能需要考虑返还给肇事者司机，但这并非绝对，还需根据具体情况和法律规定来判断。
特殊场景：
- 在某些情况下，肇事者司机可能会要求受害者签署一些文件或协议，其中可能包含关于这五百块的条款。受害者在签署前应仔细阅读并理解这些条款，必要时可寻求法律帮助，以确保自己的权益不受损害。
行动建议：
- 保留证据：无论这五百块是赔偿款还是其他性质的支付，受害者都应保留好相关证据，如收据、转账记录、聊天记录等，以备不时之需。
- 协商沟通：如果肇事者司机要求返还这五百块，受害者应首先与其进行协商沟通，明确这五百块的性质和后续处理方式。
- 寻求法律帮助：如果双方无法达成一致意见，或者受害者对法律规定不了解，可以寻求专业律师的帮助，以维护自己的合法权益。
法律背景：
- 根据《中华人民共和国道路交通安全法》及相关司法解释的规定，交通事故中的赔偿应遵循公平、合理、合法的原则。肇事者司机应根据其过错程度承担相应的赔偿责任。
- 在赔偿过程中，双方应协商确定赔偿金额和支付方式，并可以签订书面协议以明确双方的权利和义务。如果协商不成，可以通过调解或诉讼等方式解决争议。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。