若单位要求退还特意多给的加班费，是否需要退还取决于具体情况，以下分情况说明：

1. 单位存在计算错误或操作失误

   • 法律分析：如果单位是因为计算错误、系统故障或者财务操作失误等非主观故意的原因，多支付了加班费，从法律上讲，这属于不当得利。根据《中华人民共和国民法典》第九百八十五条规定，得利人没有法律根据取得不当利益的，受损失的人可以请求得利人返还取得的利益。在这种情况下，单位有权要求员工退还多支付的加班费。
   • 应对建议：员工应当配合单位进行核实，如果确认是多支付的，建议与单位友好协商退还事宜。可以与单位协商确定一个合理的退还方式和时间，比如分期退还等，以避免给自己的生活造成过大的经济压力。

2. 单位是故意多给且明确表示无需退还

   • 法律分析：如果单位是出于某种特殊目的，比如奖励员工、激励员工等，故意多给加班费，并且明确表示这部分多给的费用无需员工退还，那么这就相当于单位与员工之间达成了一种赠与的合意。根据《中华人民共和国民法典》第六百五十七条规定，赠与合同是赠与人将自己的财产无偿给予受赠人，受赠人表示接受赠与的合同。在这种情况下，员工有权不退还多给的加班费。
   • 应对建议：员工应当保留好单位表示无需退还的相关证据，比如书面通知、聊天记录、邮件等。如果单位事后反悔要求退还，员工可以凭借这些证据来维护自己的合法权益。

3. 单位以胁迫、欺诈等手段要求退还

   • 法律分析：如果单位以胁迫、欺诈等手段，比如威胁员工如果不退还多给的加班费就会辞退员工、扣发其他工资等，要求员工退还加班费，这种行为是违法的。根据《中华人民共和国劳动合同法》等相关法律法规，用人单位不得以胁迫、欺诈等手段迫使劳动者做出违背其真实意愿的行为。在这种情况下，员工有权拒绝退还，并且可以向劳动监察部门投诉或者申请劳动仲裁。
   • 应对建议：员工应当及时收集单位胁迫、欺诈的相关证据，比如录音、录像、证人证言等。在拒绝退还的同时，尽快向劳动监察部门投诉或者申请劳动仲裁，以维护自己的合法权益。

如果遇到单位要求退还多给加班费的情况，员工不要惊慌，先了解清楚具体情况，再根据不同的情形采取相应的应对措施。如果对具体情况的判断存在疑问，可以直接向我咨询。