结论前置：一般情况下，已经发放的加班费不需要因为后续安排调休而退回，但具体是否需要退回还需根据加班的性质以及公司的规章制度来确定。以下从不同角度进行分析：
一、加班性质与调休、加班费的关系
工作日加班：
- 根据《劳动法》的相关规定，工作日加班通常应支付不低于工资的百分之一百五十的工资报酬，且一般不能通过调休来替代加班费。因此，如果加班费已经发放，且加班性质为工作日加班，那么即使后续安排了调休，员工也不需要退回已发放的加班费。
休息日加班：
- 休息日加班，如果公司不能安排补休，则应支付不低于工资的百分之二百的工资报酬。但如果公司能够安排补休，那么员工在享受了调休后，理论上公司可以不再支付加班费。然而，在实际操作中，如果公司已经先发放了加班费，再安排调休，员工通常不需要退回已发放的加班费，因为这可以视为公司对员工的一种补偿或福利。但具体是否需要退回，还需看公司的规章制度或劳动合同中的约定。
法定节假日加班：
- 法定节假日加班，公司应支付不低于工资的百分之三百的工资报酬，且不能通过调休来替代加班费。因此，如果加班费已经发放，且加班性质为法定节假日加班，那么员工绝对不需要退回已发放的加班费。
二、公司规章制度与劳动合同的影响
- 除了加班的性质外，公司的规章制度和劳动合同中的约定也是决定是否需要退回加班费的重要因素。如果公司的规章制度或劳动合同中明确规定，加班后安排调休需要退回已发放的加班费，那么员工可能需要按照规定执行。但这样的规定必须合法合规，且不得损害员工的合法权益。
三、实际操作建议
- 对于员工：如果公司要求退回已发放的加班费，员工应首先查看公司的规章制度和劳动合同中的相关约定。如果认为公司的要求不合理或违法，可以与公司进行协商或向劳动监察部门投诉。
- 对于公司：在制定规章制度和劳动合同时，应明确加班、调休和加班费的相关规定，确保合法合规且不损害员工的合法权益。同时，在安排加班和调休时，应充分考虑员工的意愿和实际情况，避免引起不必要的纠纷。
总结：已经发放的加班费是否需要因为后续安排调休而退回，取决于加班的性质、公司的规章制度以及劳动合同中的约定。在大多数情况下，特别是工作日和法定节假日加班的情况下，员工不需要退回已发放的加班费。但具体是否需要退回，还需根据实际情况来判断。如果有任何疑问或纠纷，建议直接向我咨询，我会根据具体情况提供专业的法律意见。