结论：银行直接从您的账户扣利息是否合法，需分情况判断，关键在于贷款合同约定、账户性质及是否获得您的授权。

1. 若贷款合同明确约定共同还款责任，且您签署了账户扣款授权书，银行行为合法
   根据《民法典》第667条，借款合同是借款人向贷款人借款，到期返还借款并支付利息的合同。若您与配偶共同申请贷款，且在贷款合同中明确约定为“共同借款人”或“连带责任保证人”，同时您签署了《账户扣款授权书》，授权银行在特定账户中扣划款项用于还款，则银行直接从您账户扣利息的行为具有合法依据。此时，您作为共同还款义务人，需承担还款责任。

2. 若您未签署授权书，或账户为个人专用账户且未约定扣款，银行行为可能违法
   若贷款合同中仅您配偶为借款人，您未作为共同借款人签字，且您未签署任何账户扣款授权文件，银行擅自从您账户扣利息可能侵犯您的财产权。根据《商业银行法》第29条，商业银行办理个人储蓄存款业务，应当遵循存款自愿、取款自由、存款有息、为存款人保密的原则。未经您书面授权，银行无权单方扣划您账户内的资金。此时，您可要求银行返还扣款，并可向银保监会投诉或通过诉讼维护权益。

3. 若账户为夫妻共同财产账户，需结合贷款用途判断
   若您与配偶的账户为共同财产账户（如联名账户），且贷款用于夫妻共同生活（如购房、经营等），根据《民法典》第1064条，夫妻双方共同签名或事后追认的债务，以及一方在婚姻关系存续期间以个人名义为家庭日常生活需要所负的债务，属于夫妻共同债务。此时，即使您未单独签署授权书，银行从共同账户扣利息也可能被认定为合法，但需结合具体证据判断贷款用途是否属于共同债务范畴。

建议行动步骤：

1. 核查贷款合同，确认您是否为共同借款人或担保人；
   
2. 检查是否签署过账户扣款授权书（如《代扣协议》《自动转账授权书》等）；
   
3. 若未授权且非共同债务，立即联系银行要求停止扣款并返还资金；
   
4. 若银行拒绝，可向当地银保监会投诉或向法院起诉，主张银行侵权。
   

如有进一步细节（如合同条款、扣款通知等），可提供给我，我会为您具体分析。