若银行要求归还违规贷款而借款人拒不归还，可能会面临以下法律后果：
信用受损：
- 银行会将借款人的逾期还款记录上报至征信机构，导致借款人的个人信用报告中出现不良记录。这将对借款人未来的贷款申请、信用卡办理等金融活动产生负面影响，甚至可能影响到就业、租房等日常生活方面。
产生罚息和违约金：
- 根据贷款合同的约定，借款人逾期还款将需要支付罚息和违约金。这些费用通常较高，会进一步增加借款人的还款负担。
面临法律诉讼：
- 银行有权向法院提起诉讼，要求借款人归还贷款本金、利息、罚息及违约金等。若法院判决借款人败诉，借款人将需要履行判决义务，即归还贷款及相关费用。若借款人拒不履行判决，银行可以申请强制执行，法院有权采取查封、扣押、拍卖等措施来强制执行判决。
可能构成犯罪：
- 在某些情况下，若借款人以非法占有为目的，通过虚构事实、隐瞒真相等手段骗取银行贷款，且数额较大，可能构成贷款诈骗罪。根据《中华人民共和国刑法》的相关规定，贷款诈骗罪将受到严厉的刑事处罚，包括有期徒刑、拘役和罚金等。
针对此情况，我给出以下法律建议：
积极与银行沟通：
- 若借款人确实存在还款困难，应主动与银行沟通，说明情况并寻求解决方案。银行可能会根据借款人的实际情况，提供延期还款、分期还款等灵活的还款方式。
审查贷款合同：
- 借款人应仔细审查贷款合同，了解合同中的各项条款，特别是关于还款、罚息、违约金及违约责任等方面的约定。若合同中存在不公平、不合理的条款，借款人可以依法主张权利。
寻求法律援助：
- 若借款人面临法律诉讼或认为自己的权益受到侵害，可以寻求专业律师的法律援助。律师将根据借款人的具体情况，提供法律咨询、代理诉讼等法律服务，帮助借款人维护自己的合法权益。
若您面临银行要求归还违规贷款的情况，且对如何处理存在疑问或担忧，请直接向我咨询。我将根据您的具体情况，提供专业、全面的法律建议。