结论：民间借贷中已付利息是否可以双方达成协议退回，需视具体情况而定，包括利息的合法性、双方协议内容以及是否存在可撤销或无效的情形。

1. 合法利息情况下的处理

• 若利息合法：根据《中华人民共和国民法典》及相关司法解释，民间借贷中约定的利息若未超过合同成立时一年期贷款市场报价利率的四倍，则属于合法利息。在此情况下，双方已支付的合法利息，原则上不能随意要求退回。因为合法利息是借款人因使用资金而应支付的对价，双方已自愿履行完毕，不存在退回的法律依据。
• 双方协议退回：尽管合法利息原则上不能退回，但如果双方自愿达成协议，同意退回部分或全部已付利息，且该协议不违反法律、行政法规的强制性规定，不违背公序良俗，那么该协议是有效的。双方应按照协议内容履行，退回已付利息。

2. 非法利息情况下的处理

• 若利息非法：根据《最高人民法院关于审理民间借贷案件适用法律若干问题的规定》，若民间借贷中约定的利息超过合同成立时一年期贷款市场报价利率的四倍，则超出部分的利息不受法律保护。在此情况下，借款人已支付的超出合法利率部分的利息，有权要求出借人退回。
• 双方协议退回非法利息：对于非法利息部分，即使双方之前未明确约定退回，借款人也有权要求出借人退回。若双方此时达成协议，明确退回非法利息，该协议同样具有法律效力。双方应按照协议内容，退回非法利息部分。

3. 存在可撤销或无效情形下的处理

• 可撤销情形：若双方在签订借款合同时，存在欺诈、胁迫等情形，导致借款人支付了不应支付的利息，那么借款人有权请求人民法院或仲裁机构撤销该合同或相关条款。在合同被撤销后，借款人已支付的利息，有权要求出借人退回。
• 无效情形：若借款合同因违反法律、行政法规的强制性规定或违背公序良俗而无效，那么合同中关于利息的约定也无效。在此情况下，借款人已支付的利息，同样有权要求出借人退回。若双方此时达成协议，明确退回已付利息，该协议也具有法律效力。

法律建议：

• 在民间借贷中，双方应明确约定利息的合法性，并确保利息不超过法定上限。
• 若双方已支付利息并希望退回，应首先审查利息的合法性，并评估是否存在可撤销或无效的情形。
• 在达成退回利息的协议时，应确保协议内容合法、明确，并保留好相关证据，以备不时之需。

如有任何疑问或需要进一步的法律帮助，请直接向我咨询。