结论：用工单位没给退回通知单，但退工事实已形成，从法律角度和实际操作层面来看，一般可以认定为已退回，但具体情况还需结合实际证据和法律规定综合判断。
法律角度分析
退工事实的认定：
- 退工事实的形成，通常指的是用工单位与劳动者之间的劳动关系已经实际终止或解除，且这一事实有相应的证据可以证明，如用工单位停止安排工作、停止支付工资、办理离职手续等。
- 退回通知单虽然是证明退工事实的一种书面证据，但并非唯一证据。如果退工事实已经通过其他方式（如口头通知、实际行为等）得到确认，且没有相反证据推翻，那么即使没有退回通知单，也可以认定退工事实已经形成。
法律后果与责任：
- 如果用工单位未依法出具退回通知单，但退工事实已经形成，劳动者可以依据实际证据（如工作记录、工资单、同事证言等）来证明退工事实，并据此主张自己的权益，如要求用工单位出具离职证明、办理社保转移手续等。
- 如果因用工单位未出具退回通知单而导致劳动者遭受损失（如无法及时领取失业保险金、无法顺利入职新单位等），劳动者有权要求用工单位承担相应的赔偿责任。
实际操作层面分析
证据收集与保存：
- 劳动者在面临退工情况时，应尽可能收集并保存与退工事实相关的证据，如工作记录、工资单、同事证言、聊天记录等。这些证据在后续维权过程中将起到关键作用。
- 如果用工单位未出具退回通知单，劳动者可以主动要求用工单位出具，并保留好相关沟通记录（如邮件、短信、微信等）。
协商与调解：
- 在退工事实已经形成但用工单位未出具退回通知单的情况下，劳动者可以尝试与用工单位进行协商，要求其出具退回通知单或确认退工事实。
- 如果协商无果，劳动者可以向当地劳动争议调解组织申请调解，寻求第三方机构的帮助来解决问题。
法律途径：
- 如果协商和调解均无法解决问题，劳动者可以向当地劳动争议仲裁委员会申请仲裁，要求用工单位确认退工事实并承担相应责任。
- 在仲裁过程中，劳动者需要提供充分的证据来证明自己的主张，并遵循仲裁程序的规定进行陈述和辩论。
建议：如果您遇到了用工单位没给退回通知单但退工事实已形成的情况，建议您首先收集并保存好与退工事实相关的证据；然后尝试与用工单位进行协商或申请调解；如果问题无法得到解决，再考虑通过法律途径来维护自己的权益。如果您有任何疑问或需要进一步的法律帮助，请直接向我咨询。