结论：农业银行贷款不还，在特定条件下，银行有权从担保人卡里扣钱。以下是对这一问题的详细分析：

1. 担保责任的基本概念：

   • 在贷款合同中，担保人承担的是连带责任保证或一般责任保证。连带责任保证意味着，当债务人（即借款人）不履行还款义务时，银行有权直接要求担保人承担还款责任。一般责任保证则是在债务人确实无法履行还款义务时，银行才能要求担保人承担还款责任。但具体是哪种保证方式，需依据贷款合同中的约定来确定。

2. 银行扣款的法律依据：

   • 根据《中华人民共和国民法典》的相关规定，担保人在债务人不履行到期债务或者发生当事人约定的情形时，应当按照约定履行债务或者承担责任。这意味着，如果贷款合同中明确约定了银行在借款人违约时有权从担保人账户中扣款，且该约定不违反法律法规的强制性规定，那么银行就有权这么做。

3. 实际操作中的流程：

   • 在实际操作中，银行通常不会直接扣划担保人的资金，而是会先通过催收、协商等方式尝试让借款人还款。如果借款人仍然不还款，银行可能会向法院提起诉讼，要求借款人还款，并同时要求担保人承担连带责任。在法院判决生效后，如果借款人仍然不履行还款义务，银行可以申请法院强制执行，包括扣划担保人的银行账户资金。

4. 担保人的权益保护：

   • 作为担保人，你有权要求银行在扣款前提供充分的证据和法律依据。如果银行未经合法程序擅自扣款，你可以向银行提出异议，并有权通过法律途径维护自己的合法权益。同时，在签订担保合同时，你也应仔细阅读合同条款，了解自己的权利和义务，避免因为不了解合同内容而承担不必要的风险。

5. 特殊情况下的处理：

   • 如果担保人发现银行扣款行为存在违法或不当之处，如扣款金额超过担保范围、扣款程序不合法等，担保人可以及时向银行提出书面异议，并要求银行立即停止扣款行为。如果银行不予理会或处理不当，担保人可以向当地银保监会等监管部门投诉，或者通过法律途径解决争议。

建议：如果你作为担保人面临农业银行贷款不还的情况，建议先与银行沟通了解具体情况，并查看贷款合同和担保合同中的相关条款。如果银行确实有权扣款且扣款行为合法合规，那么你需要承担相应的还款责任。如果你认为银行的扣款行为存在违法或不当之处，可以及时向银行提出异议并寻求法律帮助。有问题可以直接向我咨询，我会根据你的具体情况提供更详细的法律建议。