用人单位退工时间，简单来说，就是用人单位与劳动者终止或解除劳动关系的时间点。这个时间点对于双方来说都非常重要，因为它涉及到一系列后续手续的办理，比如档案转移、社会保险停缴、失业登记以及失业保险待遇的享受等。

具体来说，当用人单位决定与劳动者终止或解除劳动合同时，就需要在一定的时间内（通常是按照当地劳动保障部门的规定）办理退工手续。这个手续一般包括两个主要部分：一是退工备案，即用人单位需要向劳动保障部门报告这一劳动关系的变化；二是退工停保登记，即用人单位需要停止为该劳动者缴纳社会保险费，并办理相关的停保手续。

在办理退工备案手续后，用人单位通常需要在15日内按照《劳动合同法》的有关规定，为劳动者办理档案转移手续。这意味着用人单位需要将劳动者的个人档案从单位档案中移出，并交给劳动者本人或者新的接收单位。同时，用人单位还需要将终止或解除劳动关系的相关凭证交给劳动者，并书面告知其按规定办理失业登记和享受失业保险待遇的相关事宜。

此外，如果劳动者在与原用人单位终止或解除劳动合同后，立即与新用人单位签订了劳动合同，那么在某些情况下，可能不需要办理退工备案手续。新用人单位可以凭终止或解除劳动合同的相关证明，直接为劳动者办理就业登记手续。

总的来说，用人单位退工时间是一个关键的时间节点，它标志着用人单位与劳动者之间劳动关系的终止或解除，并引发一系列后续手续的办理。因此，无论是用人单位还是劳动者，都应该对这个时间点有清晰的认识，并按照规定及时办理相关手续，以保障双方的合法权益。