结论：客户是否有责任，取决于具体情况，包括客户是否知晓存款被退回、客户是否采取了不当行为以及银行工作人员的行为性质等。以下从不同角度进行分析：
一、客户不知情且未采取不当行为
法律背景：
- 在一般情况下，如果客户对银行存款被退回这一事实并不知情，且没有采取任何不当行为（如与银行工作人员串通、提供虚假信息等），那么客户通常不需要承担责任。
- 银行作为金融机构，有义务确保存款的安全和准确记录。如果银行工作人员因操作失误或故意行为导致存款被退回，这是银行内部管理问题，与客户无关。
法律建议：
- 如果客户发现存款被退回且不知情，应立即与银行联系，了解原因并要求银行恢复存款记录。
- 客户可以保留相关证据（如存款凭证、银行对账单等），以备不时之需。
二、客户知晓存款被退回但未采取行动
法律背景：
- 如果客户知晓存款被退回，但出于某种原因（如认为银行会自行处理、担心麻烦等）未采取行动，这可能会引发一些法律问题。
- 虽然客户没有直接导致存款被退回，但他们的不作为可能被视为对银行权益的侵害，尤其是在银行因此遭受损失的情况下。然而，这种责任通常较为轻微，且需要具体证据支持。
法律建议：
- 客户在知晓存款被退回后，应尽快与银行联系并说明情况，以避免潜在的法律纠纷。
- 如果银行因此遭受损失，客户可能需要根据具体情况承担一定的赔偿责任，但这通常需要银行提供充分证据证明客户的过错与损失之间的因果关系。
三、客户与银行工作人员串通或提供虚假信息
法律背景：
- 如果客户与银行工作人员串通或提供虚假信息导致存款被退回，那么客户将承担严重的法律责任。
- 这种行为可能构成欺诈、合谋等违法行为，客户可能面临刑事指控和民事赔偿。
法律建议：
- 客户应坚决避免与银行工作人员串通或提供虚假信息，以维护自己的合法权益和避免法律风险。
- 如果客户已经涉及此类行为，应立即停止并主动向银行和相关部门说明情况，以减轻可能的法律后果。
四、银行工作人员的行为性质
法律背景：
- 银行工作人员的行为性质（如操作失误、故意行为等）也会影响客户的责任。
- 如果银行工作人员的行为是故意的或涉及违法行为，客户通常不需要承担责任，但可能需要配合银行和相关部门的调查。
法律建议：
- 客户在遇到存款被退回的情况时，应了解银行工作人员的行为性质，并据此采取相应的行动。
- 如果银行工作人员的行为涉嫌违法，客户可以向银行或相关部门举报，并保护自己的合法权益。
进一步思考：在处理此类问题时，客户应保持冷静并收集相关证据。如果与银行协商无果或认为自己的权益受到侵害，客户可以考虑通过法律途径解决纠纷。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。