结论：银行是否有责任，取决于老板取走工人工资卡里钱的具体方式以及银行是否尽到了相应的审核义务。以下从不同情况进行分析：

1. 如果老板是通过合法手段，如持有工人的授权委托书、工资卡及密码等，在银行正常办理取款业务：

   • 在这种情况下，银行通常不承担责任。因为银行在办理业务时，会依据客户提供的有效证件和密码等进行审核，只要审核通过，银行就会按照客户的指示进行操作。老板持有工人的相关授权和工资卡信息，银行有理由相信其有权进行取款操作，因此不构成违规或过错。

2. 如果老板是通过非法手段，如盗取工资卡、窃取密码或伪造相关证件等，在银行办理取款业务：

   • 若银行在办理业务时未尽到审核义务：例如，银行工作人员未仔细核对取款人的身份信息、证件真伪或未按照规定的流程进行操作等，导致老板成功取走款项，那么银行可能需要承担一定的责任。这种责任可能包括赔偿工人因此遭受的损失等。
   • 若银行在办理业务时已尽到审核义务：例如，银行工作人员已经按照规定的流程进行了审核，但由于老板的手段过于狡猾或伪造证件过于逼真等原因，导致银行未能发现异常，那么银行可能不承担责任。因为银行已经尽到了其应尽的审核义务，无法预见和防止此类非法行为的发生。

法律建议：

• 对于工人而言，如果发现工资卡里的钱被老板非法取走，应立即报警并保留相关证据，如工资卡交易记录、报警记录等。同时，可以向银行咨询相关情况，要求银行提供取款时的监控录像等证据，以便后续维权。
• 对于银行而言，应加强内部管理，提高工作人员的审核意识和能力，确保在办理业务时严格遵守相关规定和流程。同时，应积极配合警方和客户的调查工作，提供必要的证据和信息。

可能的法律后果：

• 如果银行被认定未尽到审核义务，可能需要承担赔偿工人损失等民事责任。
• 如果老板的行为构成犯罪，如盗窃罪、信用卡诈骗罪等，将面临刑事责任的追究。

如有更多疑问或需要进一步的法律帮助，请直接向我咨询，我会根据你的具体情况提供详细的法律建议。