结论概述：
- 若您与对方已明确解除代扣关系，且无其他担保或连带责任约定，您通常无需对对方后续的偿还能力负责。
- 但若存在特殊情况，如您曾作为担保人或存在其他法律上的连带责任，则可能需承担相应责任。
详细分析：
一、一般情况下的责任分析
在房产贷款的代扣关系中，通常涉及的是贷款银行、借款人（即对方）以及代扣人（即您，如果曾作为代扣人）。当双方去银行解除代扣关系后，这一法律关系即告终止。在此情况下，如果对方后续无力偿还贷款，这主要属于借款人的个人债务问题，与您作为曾经的代扣人无直接法律关系。
法律依据与解释：
- 代扣关系的解除，意味着您不再承担代扣的义务，也不再与贷款银行或借款人之间存在因代扣而产生的法律关系。
- 借款人的偿还能力是其个人财务状况的反映，与您无关。除非您与借款人之间存在其他法律上的约定或担保关系。
二、特殊情况下的责任分析
尽管在一般情况下您无需承担责任，但存在以下特殊情况时，您可能需要承担相应的法律责任：
您曾作为担保人：
- 如果您在贷款过程中曾作为借款人的担保人，那么当借款人无力偿还贷款时，银行有权要求您承担担保责任，即代为偿还贷款。
- 法律依据：根据《中华人民共和国民法典》中关于担保的规定，担保人在债务人不履行债务时，需按照约定履行债务或者承担责任。
存在其他连带责任约定：
- 如果您与借款人之间存在其他书面或口头的约定，明确您在某种情况下需承担连带责任，那么当借款人无力偿还时，您也可能需承担相应责任。
- 法律依据：根据合同法的相关规定，当事人之间的约定具有法律约束力，双方需按照约定履行义务。
三、建议与措施
审查相关合同与协议：
- 建议您仔细审查与借款人、银行之间签订的所有合同与协议，特别是关于代扣、担保或连带责任的部分，以明确自己的法律地位和责任。
保留相关证据：
- 保留所有与代扣关系解除相关的文件、记录或通信，以备不时之需。这些证据可能在未来涉及法律纠纷时起到关键作用。
咨询专业律师：
- 如果您对自身的法律责任存在疑问或担忧，建议及时咨询专业律师，以便获得更具体、更专业的法律建议。
四、可能面临的法律后果
- 如果您确实无需承担责任，那么借款人无力偿还贷款将主要影响其个人信用记录，并可能面临银行的催收、诉讼等法律程序。
- 如果您需承担担保或连带责任，那么银行有权要求您代为偿还贷款，并可能通过法律程序追讨欠款。这将对您的个人财务状况和信用记录产生负面影响。
总结与提醒：
在解除代扣关系后，您通常无需对对方后续的偿还能力负责。但为确保自身权益，建议您仔细审查相关合同与协议，保留相关证据，并在必要时咨询专业律师。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。