不会直接扣除老婆银行卡上的钱。下面我来详细解释一下这个问题：

首先，我们要明确房子抵押贷款的基本流程。在大多数情况下，如果房子是夫妻共同财产，且贷款是用于夫妻共同生活或共同经营，那么贷款申请通常需要夫妻双方共同签字。但如果只有一方签字，且贷款机构接受了这种安排，那么贷款合同就只在签字方和贷款机构之间产生法律效力。

接下来，我们分析贷款逾期或违约的情况。如果贷款出现逾期或违约，贷款机构有权根据贷款合同的约定采取一系列措施来追回贷款，包括但不限于起诉借款人、查封抵押物等。然而，这些措施都只能针对签字方，即贷款合同的当事人。

现在，我们来看这个问题的核心：是否会扣除未签字方的银行卡上的钱。根据前面的分析，我们知道贷款合同只在签字方和贷款机构之间产生法律效力。因此，如果未签字方（在这个问题中是“老婆”）的银行卡上的钱被扣除，那么这就构成了对未签字方财产的非法侵犯。除非有特别的法律规定或法院判决，否则贷款机构是无权直接扣除未签字方银行卡上的钱的。

综上所述，如果房子抵押贷款只有一方签字，且贷款出现逾期或违约，贷款机构是无权直接扣除未签字方（如“老婆”）银行卡上的钱的。当然，如果夫妻双方有共同的财产或债务安排，或者未签字方在后续以某种方式承认了这笔债务，那么情况可能会有所不同。但根据目前的描述，我们可以明确回答：不会直接扣除老婆银行卡上的钱。