花呗付款退回来的钱通常会直接退到支付宝余额或者花呗额度中。具体情况如下：

1. 退到支付宝余额：如果你使用花呗付款后发生退款，且退款金额较小或者退款时你的花呗账单已经还清，那么退款金额可能会直接退到你的支付宝余额中。这样，你就可以直接在支付宝余额中看到这笔退款，并可以随意支配。

2. 退到花呗额度：如果你使用花呗付款后发生退款，且退款金额较大或者退款时你的花呗账单还未还清，那么退款金额可能会直接退到你的花呗额度中。这样，你的花呗额度会相应增加，相当于你提前还款了一部分花呗账单。

无论退款退到哪个位置，你都可以在支付宝的账单或者花呗的账单中查看到详细的退款记录。如果你对退款情况有疑问，可以直接在支付宝中查看账单详情，或者联系支付宝客服进行咨询。