结论：判决书解除了协议后，房屋剩余贷款的偿还责任需根据具体情况判断，一般可能由原贷款人继续偿还，或根据判决书确定的责任方偿还，也可能通过协商或诉讼重新确定偿还责任。
详细分析：
原贷款人继续偿还：
- 在许多情况下，即使协议被解除，原贷款人（即最初签订贷款合同的一方）可能仍需继续偿还剩余贷款。这是因为贷款合同是贷款人与银行之间签订的，具有相对独立性，不因协议的解除而自动终止。
- 例如，如果夫妻双方在婚姻期间共同购买房屋并签订贷款合同，后来离婚并判决解除购房协议，但贷款合同并未因此解除，那么原贷款人（可能是夫妻一方或双方）仍需继续偿还贷款。
根据判决书确定的责任方偿还：
- 判决书在解除协议的同时，可能会明确房屋剩余贷款的偿还责任。这通常取决于协议解除的原因、双方过错程度以及法院对公平原则的考量。
- 例如，如果协议因一方违约而被解除，法院可能判决违约方承担剩余贷款的偿还责任，或者根据双方过错程度分担偿还责任。
协商或诉讼重新确定偿还责任：
- 如果判决书未明确剩余贷款的偿还责任，或者双方对判决结果有异议，可以通过协商或诉讼的方式重新确定偿还责任。
- 协商方面，双方可以就剩余贷款的偿还方式、期限等达成一致，并签订书面协议。
- 诉讼方面，如果协商不成，任何一方都可以向法院提起诉讼，请求法院判决剩余贷款的偿还责任。
后续行动建议：
- 仔细阅读判决书：首先，应仔细阅读判决书，了解法院对协议解除的具体原因、双方过错程度以及剩余贷款偿还责任的判决。
- 与银行沟通：其次，应与贷款银行沟通，了解贷款合同的现状、剩余贷款金额以及偿还方式等信息。
- 协商或诉讼：根据判决书和银行的信息，与对方协商剩余贷款的偿还责任。如果协商不成，可以考虑通过诉讼的方式解决争议。
可能涉及的法律条款：
- 《中华人民共和国民法典》中关于合同解除、贷款合同以及公平原则的相关规定，可能作为法院判决的依据。
在处理此类问题时，建议根据具体情况咨询专业律师（即我本人，李丹丹律师，专注于婚姻家庭、经济纠纷领域），以便更准确地理解法律条款和法院判决，并采取合适的后续行动。如果你有任何疑问或需要进一步的法律帮助，请直接向我咨询。