借给别人的钱，若借款人去世，应向其继承人主张债权，但仅以继承人所得遗产实际价值为限。具体分析如下：

一. 继承人清偿债务的责任

• 根据《中华人民共和国民法典》第一千一百六十一条，继承人需以所得遗产实际价值为限，清偿被继承人依法应当缴纳的税款和债务。这意味着，如果借款人去世，其继承人（如子女、配偶等）在继承遗产的同时，也需承担清偿被继承人债务的责任，但仅限于遗产的实际价值。

二. 超过遗产价值的债务处理

• 同样依据《中华人民共和国民法典》第一千一百六十一条，如果债务超过遗产实际价值，继承人没有义务超出遗产价值范围进行偿还。除非继承人自愿偿还，否则债权人不能强制要求继承人承担超出遗产价值的债务。

三. 继承人放弃继承的情况

• 若继承人选择放弃继承，根据同一法条，他们对被继承人的税款和债务将不负清偿责任。在这种情况下，债权人需要寻找其他途径来追回债务，如查看借款人是否有其他财产可供执行。

我建议，在借款人去世后，你首先应与借款人的继承人进行沟通，了解遗产分配情况，并主张你的债权。如果继承人同意在遗产范围内清偿债务，那么你可以按照约定收回借款。如果继承人拒绝清偿或遗产不足以清偿债务，你可能需要考虑通过法律途径来维护你的权益。如有进一步需要，您可以继续咨询我。