结论：伤残赔偿金在赔付后，一般情况下不会因为受害人两年后死亡而被要回。但具体是否会被要回，还需根据伤残赔偿金的性质、支付方式以及是否存在特殊情况等因素进行综合判断。
分析说明：
伤残赔偿金的性质：
- 伤残赔偿金是对受害人因身体受伤导致残疾而给予的一种经济补偿，旨在弥补受害人因残疾而减少的收入、增加的生活费用等损失。
- 这种赔偿金一旦支付，即成为受害人的个人财产，其有权自由支配和使用。
支付方式的影响：
- 如果伤残赔偿金是一次性支付的，那么受害人死亡后，该赔偿金作为其遗产，由其继承人继承，支付方无权要求返还。
- 如果伤残赔偿金是分期支付的，且受害人死亡时仍有未支付的款项，那么支付方可能会根据合同或法律规定，停止支付剩余款项，但已支付的款项通常不会被要求返还。
特殊情况：
- 在极少数情况下，如果伤残赔偿金的支付是基于某种特定条件或期限，且该条件或期限与受害人的生存状态直接相关（例如，某些基于生命年限的赔偿计算），那么受害人死亡后，支付方可能会根据合同或法律规定，要求返还部分或全部已支付的赔偿金。但这种情况非常罕见，且需要具体的合同条款或法律规定作为依据。
- 另外，如果伤残赔偿金的支付存在欺诈、胁迫等违法行为，或者受害人及其家属在获得赔偿金后存在不当得利等情形，支付方也可能有权要求返还。但这些情况同样需要具体的证据和法律规定作为支持。
行动建议：
- 对于受害人及其家属来说，如果担心伤残赔偿金在受害人死亡后会被要回，可以仔细审查赔偿协议或合同中的条款，了解赔偿金的性质、支付方式以及是否存在特殊条件或期限。
- 如果赔偿协议或合同中存在不明确或模糊的条款，建议及时咨询专业律师，以便明确双方的权利和义务，避免后续纠纷。
- 在任何情况下，都应保留好与伤残赔偿金相关的所有文件和证据，以备不时之需。
法律背景：
- 根据《中华人民共和国民法典》等相关法律法规的规定，伤残赔偿金是对受害人因身体受伤导致残疾而给予的一种经济补偿，其性质属于个人财产。
- 在没有特定合同条款或法律规定的情况下，支付方无权要求返还已支付的伤残赔偿金。
如有更多关于工伤赔偿的疑问，可以直接向我咨询，我会为你提供更详细、更专业的解答。