结论：律师费与欠款同额时，退款给对方后律师费的负责问题，主要取决于双方之间的合同约定以及案件的具体情况。以下从不同角度进行分析：
合同约定优先：
- 在民间借贷纠纷中，如果双方在借款合同或者相关协议中明确约定了律师费的承担方式，那么应当遵循合同约定。例如，合同中可能规定，如果因一方违约导致另一方提起诉讼，违约方需承担守约方因此产生的律师费。在这种情况下，如果退款给对方，且合同中有明确约定律师费由哪一方承担，那么就按照合同约定来处理。
无合同约定时的处理：
- 如果双方没有明确的合同约定，那么律师费的承担通常需要根据案件的具体情况和法律规定来判断。在一般情况下，律师费被视为诉讼成本的一部分，由各自承担。也就是说，如果退款给对方，且没有合同约定律师费由哪一方承担，那么双方通常各自承担自己的律师费。
特殊情况下的处理：
- 在某些特殊情况下，如对方存在恶意诉讼、滥用诉讼权利等行为，导致你方不得不聘请律师进行辩护，那么根据公平原则和诚实信用原则，法院可能会酌情判决对方承担你方因此产生的部分或全部律师费。但这需要具体的证据支持，并且由法院根据案件情况进行裁量。
法律建议：
- 在处理此类问题时，首先应当仔细审查双方之间的合同或协议，看是否有关于律师费承担的明确约定。
- 如果没有合同约定，或者约定不明确，那么建议双方通过协商来解决律师费的承担问题。协商不成的，可以寻求法律途径解决，但需要做好充分的证据准备和法律分析。
- 在任何情况下，都建议保留好与案件相关的所有证据和文件，包括借款合同、还款记录、律师费发票等，以便在需要时提供证明。
可能后果：
- 如果双方无法就律师费的承担问题达成一致，且没有合同约定或法律规定支持某一方的观点，那么最终可能需要通过法院判决来确定律师费的承担方式。这可能会增加诉讼成本和时间成本，因此建议双方尽量通过协商来解决争议。
如有任何进一步的问题或需要更具体的法律建议，请直接向我咨询，我会根据你的具体情况提供更详细的解答。