劳务报酬退回时是否需要还给公司，取决于具体情况和合同条款。以下是对此问题的详细分析：

一. 劳务报酬的性质

根据《中华人民共和国个人所得税法》的规定，劳务报酬所得属于个人所得税的征税范围。这意味着，个人从提供劳务活动中取得的报酬，需要按照法律规定缴纳个人所得税。公司代缴劳务报酬的个人所得税，是履行其作为扣缴义务人的职责。

二. 劳务报酬的退回情形

1. 合同约定的退款条款：如果劳务报酬的支付与退回在双方签订的合同中有明确规定，那么应依据合同条款执行。例如，合同中可能规定如果劳务未完成或存在质量问题，劳务费需要退回。

2. 无法律依据的退款要求：如果合同中没有明确退款条款，且劳务已经提供且质量合格，那么公司通常无权要求个人退回劳务报酬。因为劳务报酬是对个人提供劳务的对价，一旦劳务提供完毕且符合约定，个人就有权获得该报酬。

三. 退税的处理

• 如果公司代缴的劳务报酬个人所得税存在多缴或错缴情况，根据《中华人民共和国税收征收管理法》第五十一条，税务机关在查实后会将多缴的税款退还给纳税人，即实际取得劳务报酬的个人。这部分退税款项应直接退给个人，而不是公司。

四. 我的建议

• 查看合同条款：首先，您应仔细查看与公司签订的劳务合同，看是否有关于劳务报酬退回的明确规定。
• 协商解决：如果合同中没有明确退款条款，但公司提出了退款要求，您可以与公司进行协商，寻求双方都能接受的解决方案。
• 咨询专业意见：如果无法就退款问题达成一致，您可以咨询专业律师或法律机构，以获取更具体的法律建议和支持。

综上所述，劳务报酬退回时是否需要还给公司，主要取决于双方签订的合同条款以及具体情况。在处理此类问题时，建议您保持冷静，仔细审查合同条款，并与公司进行积极沟通。如有进一步需要，您可以继续咨询我。