结论：公务员被开除公职后，单位要求退回取保候审期间的工资是否合法，需根据具体情况判断，若取保候审期间未实际提供劳动，单位要求退回工资可能合法；若已提供劳动，则单位要求退回工资可能不合法。以下从不同角度进行分析：

一、取保候审期间的法律状态

取保候审是刑事诉讼中的一种强制措施，它并不等同于定罪或判刑。在取保候审期间，被取保候审人的人身自由受到一定限制，但并未完全剥夺。对于公务员而言，取保候审期间其公职身份通常会被暂停，但并不意味着其与单位之间的劳动关系自动终止。

二、工资支付的法律基础

1. 劳动合同关系：公务员与单位之间存在劳动合同关系（尽管公务员的管理可能更侧重于行政法律关系，但工资支付等基本劳动权益仍受劳动法保护）。根据劳动法的原则，工资是劳动者提供劳动后应得的报酬。

2. 实际提供劳动：若公务员在取保候审期间仍实际为单位提供了劳动（如远程办公、参与特定任务等），则单位应支付相应的工资。此时，单位要求退回工资可能缺乏法律依据。

3. 未提供劳动：若公务员在取保候审期间未实际为单位提供劳动，且单位有明确规定或双方有约定在特定情况下（如取保候审）不支付工资，则单位要求退回已支付的工资可能具有合法性。但这种情况需要具体分析单位的规定或双方的约定是否合法有效。

三、开除公职后的法律后果

1. 劳动关系终止：公务员被开除公职后，其与单位之间的劳动关系通常随之终止。此时，单位可能不再承担支付工资的义务。

2. 工资结算：在劳动关系终止时，单位应与公务员进行工资结算。若公务员在取保候审期间已领取工资但未实际提供劳动，且单位规定或双方约定在此情况下应退回工资，则单位有权要求退回。但同样，这需要单位的规定或双方的约定合法有效。

四、具体建议

1. 审查单位规定：首先，应审查单位关于取保候审期间工资支付的规定或双方之间的约定。若规定或约定合法有效，且符合上述未提供劳动的情况，则单位要求退回工资可能合法。

2. 收集证据：若公务员认为自己在取保候审期间已实际提供了劳动，应收集相关证据（如工作记录、邮件往来等）以证明自己的主张。

3. 协商或诉讼：若双方对工资支付问题存在争议，可先尝试协商解决。若协商无果，可依法向劳动争议仲裁委员会申请仲裁或向人民法院提起诉讼。

最后，公务员被开除公职后单位要求退回取保候审期间的工资是否合法，需根据具体情况判断。若您在此方面遇到法律问题或需要进一步的法律帮助，请直接向我咨询。