结论：在双方互有债务，一方去世的情况下，不能直接向其继承人要求债务互抵。是否能够以去世一方的遗产来偿还其生前所负债务，取决于遗产的价值、债务的性质以及继承人的选择等多个因素。以下是对此问题的详细分析：
一、遗产价值与债务偿还
遗产足以清偿债务：
- 如果去世一方留下的遗产价值足够清偿其生前所负债务，包括你对其的债权，那么继承人需在继承的遗产范围内承担偿还责任。但这里的偿还，是继承人用继承的遗产来分别清偿各项债务，而不是直接与你进行债务互抵。例如，去世一方遗产价值50万元，欠你债务20万元，同时还有其他债务30万元，继承人需用这50万元遗产来按比例或按法定顺序清偿这些债务。
遗产不足以清偿债务：
- 若遗产价值不足以清偿全部债务，继承人只需以遗产的实际价值为限进行偿还。对于超出遗产价值的部分，继承人无需用自己的个人财产来承担，除非他们自愿偿还。同样，这种情况下也不能直接与你进行债务互抵。
二、债务性质与偿还责任
夫妻共同债务：
- 如果去世一方与你之间的债务属于夫妻共同债务（如你们双方共同签名或者一方事后追认等共同意思表示所负的债务，或者一方在婚姻关系存续期间以个人名义为家庭日常生活需要所负的债务），那么即使一方去世，另一方（即其配偶）也需承担连带责任，且这种责任不以遗产为限。但这种情况下的偿还，也是由存活一方直接向你偿还，而不是通过债务互抵的方式。
个人债务：
- 如果债务属于去世一方的个人债务，那么其偿还责任原则上应由其遗产来承担。继承人选择接受继承时，需在继承的遗产范围内承担债务的清偿责任；若继承人放弃继承，则无需承担清偿责任。
三、继承人的选择
接受继承：
- 继承人选择接受继承时，他们将继承去世一方的遗产，并同时承担在遗产范围内清偿债务的责任。但这并不意味着他们可以直接与你进行债务互抵。他们需要用继承的遗产来分别清偿各项债务。
放弃继承：
- 如果继承人明确表示放弃继承权，那么他们对去世一方的债务就不需承担清偿责任。在这种情况下，你无法向继承人要求偿还债务，更无法要求债务互抵。
四、实际操作建议
- 收集证据：首先，你需要收集能够证明你与去世一方之间存在债权债务关系的证据，如借条、转账记录、聊天记录等。
- 了解遗产情况：了解去世一方的遗产情况，包括遗产的种类、价值以及是否有其他继承人等。
- 与继承人协商：在了解遗产情况后，你可以尝试与继承人协商，看是否能够达成一个合理的偿还方案。但请注意，这种协商并不等同于债务互抵。
- 寻求法律途径：如果协商无果，你可以考虑通过法律途径来维护自己的权益。例如，向法院提起诉讼，要求继承人用继承的遗产来偿还债务。
五、法律依据
- 《中华人民共和国民法典》第一千零六十四条：规定了夫妻共同债务的认定标准。
- 《中华人民共和国民法典》第一千一百六十一条：规定了继承人以所得遗产实际价值为限清偿被继承人依法应当缴纳的税款和债务的责任。超过遗产实际价值部分，继承人自愿偿还的不在此限。继承人放弃继承的，对被继承人依法应当缴纳的税款和债务可以不负清偿责任。
综上所述，双方互有债务时，一方去世后不能直接向其继承人要求债务互抵。你需要根据遗产的价值、债务的性质以及继承人的选择等多个因素来综合考虑如何维护自己的权益。如果你有任何疑问或需要进一步的法律帮助，请直接向我咨询。