核心结论：若借款借错金额且款项已到账户但无法使用，要求退还时被索要违约金，是否需要支付取决于合同约定、实际过错及法律规定，具体分析如下：

1. 合同约定优先，但需审查条款合法性

• 若借款合同中明确约定“借款金额错误时，借款人需支付违约金”，则需进一步审查该条款是否合法有效。根据《民法典》第四百九十七条，若违约金条款显失公平（如金额过高）、免除出借人责任或加重借款人责任，可能被认定为无效条款。
• 建议：核对合同中违约金的具体比例或金额，若超过实际损失的30%（参考《民法典》第五百八十五条），可主张调整或拒绝支付。

2. 实际过错方决定责任承担

• 若出借人过错：如出借人单方面操作错误导致金额错误，借款人无过错，则无需支付违约金。此时可要求出借人自行撤回款项或协商解决。
• 若借款人过错：如借款人提供错误账户信息导致款项无法使用，可能需承担部分责任，但违约金仍需以实际损失为限。
• 若双方均无过错：如因系统故障导致金额错误，属于不可抗力或意外事件，双方可协商免除违约金。

3. 款项“无法使用”的性质影响处理

• 若款项因账户冻结、信息错误等客观原因无法使用，但借款人未实际占用资金，可主张未实际履行合同，要求出借人撤回款项且不支付违约金。
• 若款项已可自由支配但借款人主动退还，可能被认定为“提前还款”，此时需按合同约定处理违约金。但若合同未约定提前还款需支付违约金，则无需支付。

4. 法律救济途径

• 协商解决：优先与出借人沟通，说明情况并要求免除不合理违约金。
• 投诉或举报：若出借人为金融机构，可向当地银保监会或金融监管局投诉违规收费。
• 诉讼或仲裁：若协商无果，可向法院起诉或依据合同约定申请仲裁，要求确认违约金无效或调整金额。

行动建议

1. 立即固定证据：保存借款合同、转账记录、沟通记录等材料。
2. 书面通知出借人：明确要求撤回错误款项并免除违约金，留存送达证据。
3. 咨询专业意见：若涉及复杂法律问题或大额资金，可直接向我提问，我将结合具体案情提供法律方案。