结论：借钱的人死亡后，其遗产20万，欠款5万，一般情况下是需要用遗产来偿还欠款的。以下从多个角度进行分析：
法律背景与规定
根据《中华人民共和国民法典》的相关规定，继承遗产应当清偿被继承人依法应当缴纳的税款和债务，缴纳税款和清偿债务以他的遗产实际价值为限。超过遗产实际价值部分，继承人自愿偿还的不在此限。继承人放弃继承的，对被继承人依法应当缴纳的税款和债务可以不负偿还责任。
具体分析
遗产价值足够清偿债务：
- 在本案例中，欠款人死亡后留下的遗产价值为20万，而欠款金额为5万。显然，遗产价值足够清偿这笔债务。
- 因此，根据法律规定，应当从遗产中划拨5万用于偿还欠款。
遗产分配前的债务清偿：
- 在遗产分配给继承人之前，应当首先清偿被继承人的债务。
- 这意味着，在欠款人死亡后，其遗产在分配给继承人之前，需要先用来偿还包括这笔5万欠款在内的所有合法债务。
继承人的责任与义务：
- 如果欠款人有继承人，并且继承人接受了继承，那么继承人就有义务在继承的遗产范围内清偿被继承人的债务。
- 如果继承人放弃继承，则对被继承人的债务不负偿还责任。但在此案例中，由于遗产价值足够清偿债务，且未提及继承人放弃继承的情况，因此可以推断继承人需要承担清偿责任。
特殊情况考虑：
- 如果欠款人生前有遗嘱，且遗嘱中明确指定了遗产的分配方式，但遗嘱内容不得违反法律规定，特别是不得逃避债务清偿责任。
- 如果欠款人的债务存在争议或诉讼，那么遗产的分配和债务的清偿可能需要通过法律程序来解决。
实际操作建议
- 与欠款人的继承人沟通：首先，可以尝试与欠款人的继承人进行沟通，说明欠款情况，并协商遗产分配和债务清偿事宜。
- 法律途径解决：如果沟通无果或继承人拒绝清偿债务，可以考虑通过法律途径来解决。可以向法院提起诉讼，要求继承人清偿债务。
示例说明：假设欠款人A死亡后留下20万遗产，欠款5万给B。A的继承人C接受了继承。那么，C有义务在继承的20万遗产范围内清偿A的5万欠款。如果C拒绝清偿，B可以通过法律途径向C追讨欠款。
后续行动建议：如果您遇到类似情况，建议先与欠款人的继承人进行友好沟通，尝试协商解决。如果无法协商解决，可以寻求法律帮助，通过法律途径来维护自己的合法权益。有问题可以直接向我咨询，我会根据您的具体情况提供更详细的法律建议。