出借银行卡后退还赃款的处理需分情况讨论，具体如下：

1. 出借银行卡行为的法律定性
   根据《刑法》及相关司法解释，出借银行卡可能涉及帮助信息网络犯罪活动罪（帮信罪）或掩饰、隐瞒犯罪所得罪。若出借时明知对方用于违法犯罪活动（如洗钱、诈骗等），即使未直接参与犯罪，也可能构成共犯或单独成罪。退还赃款的行为属于事后补救措施，但不影响前期行为的违法性认定，仅可能作为量刑时的从轻情节。

2. 退还赃款的法律后果

   • 刑事责任层面：退还赃款可体现悔罪态度，根据《刑法》第六十七条，若在侦查阶段主动退赃，可能被认定为自首或坦白，从而减轻处罚；若在审判阶段退赃，可作为量刑情节考虑，但无法完全免除刑事责任。
     
   • 民事责任层面：若银行卡被用于接收赃款，持卡人可能因不当得利或侵权责任被要求返还资金。退还赃款可避免进一步民事纠纷，但需保留转账记录、退赃协议等证据，以证明资金流向及自身无过错。

3. 处理建议

   • 立即停止出借行为：若银行卡仍被他人使用，应第一时间挂失并报警，防止损失扩大。
     
   • 主动配合调查：向公安机关如实说明出借原因、资金流向等关键信息，争取从宽处理。
     
   • 保留证据：保存与出借相关的聊天记录、转账凭证等，证明自身无主观故意或被欺骗的情形。
     
   • 咨询专业律师：根据案件具体情节（如出借次数、金额、是否获利等），评估刑事风险并制定辩护策略。

总结：出借银行卡后退还赃款是积极补救行为，但无法完全消除法律责任。建议根据自身情况，结合上述分析采取相应措施，并直接向我咨询具体法律问题，以便进一步分析。