核心结论：一般情况下，因违约离职而要求劳动者退还工资是不合法的，但存在特定情形除外。以下从不同角度为你详细分析：
常规情形下，因违约离职退工资不合法
从法律的基本原则和规定来看，工资是劳动者提供劳动后应得的报酬，这是基于劳动付出与报酬对等的原则。劳动者按照劳动合同的约定，完成了相应的工作任务，用人单位就应当按照约定支付工资。即使劳动者存在违约离职的情况，比如未提前通知用人单位就擅自离职，这主要涉及的是违反劳动合同中关于离职程序或期限的约定，但这并不影响劳动者已经付出劳动应获得工资这一事实。
例如，小李在一家公司工作，劳动合同约定每月工资 5000 元，工作一个月后，小李未提前 30 天通知公司就离职了。公司不能因为小李违约离职就要求小李退还这 5000 元工资，因为小李已经为公司工作了一个月，提供了相应的劳动，公司应当支付这一个月的工资。
特定情形下，用人单位可能要求劳动者承担一定责任，但并非直接退工资
- 服务期约定：如果用人单位为劳动者提供了专项培训费用，对劳动者进行专业技术培训，并与劳动者约定了服务期。劳动者在服务期未满时违约离职的，用人单位可以要求劳动者按照约定支付违约金。不过，违约金的数额不得超过用人单位提供的培训费用，且用人单位要求劳动者支付的违约金不得超过服务期尚未履行部分所应分摊的培训费用。这种情况下，用人单位也不是要求劳动者退还工资，而是要求支付违约金。
- 计算公式：违约金 = 培训费用 ×（未履行服务期 ÷ 约定服务期）
- 举例：公司为小张提供了 3 万元的专业技术培训，并与小张约定了 3 年的服务期。小张工作 1 年后违约离职，那么公司可以要求小张支付的违约金为：30000×（(3 - 1)÷ 3）= 20000 元。
- 竞业限制约定：用人单位与劳动者可以在劳动合同中约定保守用人单位的商业秘密和与知识产权相关的保密事项，对负有保密义务的劳动者，用人单位可以在劳动合同或者保密协议中与劳动者约定竞业限制条款，并约定在解除或者终止劳动合同后，在竞业限制期限内按月给予劳动者经济补偿。如果劳动者违反竞业限制约定，应当按照约定向用人单位支付违约金。同样，这也不是要求劳动者退还工资。
劳动者违约离职可能面临的其他法律后果
除了上述可能支付违约金的情况外，劳动者违约离职如果给用人单位造成损失的，用人单位有权要求劳动者承担赔偿责任。但用人单位需要承担举证责任，证明损失的存在以及该损失是由劳动者的违约离职行为直接导致的。赔偿的范围通常包括用人单位因劳动者违约离职而遭受的直接经济损失，比如因劳动者突然离职导致生产停滞而产生的额外费用、为招聘新员工而产生的费用等。
法律建议：
- 对于劳动者来说，在签订劳动合同时，要仔细阅读合同条款，特别是关于服务期、竞业限制、离职程序等方面的约定，避免因不了解合同内容而在离职时陷入纠纷。如果确实需要离职，尽量按照合同约定和法律规定提前通知用人单位，办理好离职手续。
- 对于用人单位而言，在与劳动者签订劳动合同时，要明确各项条款，特别是涉及违约责任的条款，确保条款的合法性和合理性。在劳动者违约离职时，要依法维护自己的权益，通过合法途径要求劳动者承担相应的责任，但不能随意要求劳动者退还工资。
如果你在劳动工伤（工资福利）方面还有其他问题，欢迎直接向我咨询。