结论：老公在银行借款时将您的号码写作联系人，不会直接导致您手机里的钱被扣除。以下从多个角度为您详细解释：

1. 联系人与借款人的法律关系：

   • 在银行借款流程中，填写联系人主要是为了在借款人无法联系时，银行能够通过联系人获取借款人的相关信息或通知借款人相关事宜。联系人并不等同于共同借款人或担保人，因此，您不会因为被填写为联系人而直接承担还款责任，银行也无权直接从您的账户中扣款。

2. 银行扣款的法律依据：

   • 银行在扣款时，必须依据与借款人签订的借款合同以及相关法律法规进行。没有借款人的明确授权或法院的判决，银行无权擅自扣划非借款人的账户资金。因此，即使您被填写为联系人，银行也不会因此扣划您的资金。

3. 可能的风险与防范：

   • 虽然作为联系人不会直接导致资金被扣，但您可能会收到银行的催收电话或短信，这可能会给您带来一定的困扰。如果您不希望继续接收此类信息，可以向银行说明情况，要求停止向您发送催收信息。
   • 另外，如果借款人未能按时还款，银行可能会通过法律途径追讨欠款。在这种情况下，您作为联系人，不会被直接牵连进法律纠纷，但建议您提醒借款人按时还款，以避免不必要的麻烦。

4. 特殊情况下的处理：

   • 如果在借款过程中，您被误导或欺骗而成为了共同借款人或担保人，那么情况就会有所不同。在这种情况下，您可能需要承担还款责任，银行也有权在符合法律条件的情况下扣划您的资金。但根据您目前描述的情况，这种可能性较小。

建议：

• 如果您对借款合同的具体内容或银行的扣款行为有疑问，建议您仔细阅读借款合同，了解其中的条款和约定。
• 如果您收到了银行的催收信息或电话，可以与银行沟通，确认借款人的还款情况，并说明自己只是联系人而非借款人。
• 如果您担心自己的权益受到侵害，可以随时向我咨询，我会根据您的具体情况提供专业的法律建议。