退休返聘人员与用人单位之间的事实劳动关系认定，是一个涉及法律法规和司法解释的复杂问题。以下是对此问题的详细解答：

一、基本法律规定

1. 《中华人民共和国劳动合同法实施条例》第二十一条：

• 明确规定劳动者达到法定退休年龄时，劳动合同终止。这意味着原劳动关系因退休而结束，退休后再被聘用不构成新的劳动关系。

1. 《最高人民法院关于审理劳动争议案件适用法律问题的解释（一）》第三十二条：

• 进一步规定，用人单位与其招用的已经依法享受养老保险待遇或领取退休金的人员发生用工争议，人民法院应当按劳务关系处理。

1. 其他相关文件：

• 如《关于实行劳动合同制度若干问题的通知》和《中央办公厅国务院办公厅转发〈中央组织部等关于进一步发挥离退休作业技术人员作用的意见〉的通知》也强调了离退休人员被再次聘用时，应签订书面协议，但该协议不视为“劳动合同”。

二、劳务关系与劳动关系的区别

• 劳务关系：退休返聘人员与用人单位之间建立的是基于双方自愿、平等、协商一致原则的劳务关系。这种关系主要受民事法律的调整和保护，不受《劳动法》和《劳动合同法》等劳动法律的调整。
• 劳动关系：与劳务关系不同，劳动关系受《劳动法》和《劳动合同法》等法律的严格规范，包括最低工资、工作时间、休息休假、经济补偿等方面的规定。

三、具体判断标准

1. 已享受养老保险待遇或领取退休金的人员：

• 根据相关法律规定，这类人员再就业时与用人单位构成劳务关系。

1. 已达到法定退休年龄但尚未享受养老保险待遇或领取退休金的人员：

• 尽管这类人员已达到退休年龄，但由于未享受养老保险待遇或领取退休金，其与用人单位的关系可能更为复杂。在实践中，需要结合当地司法实践和具体情况进行综合判断。但一般来说，由于已达到退休年龄，劳动合同终止，难以认定为劳动关系。

1. 从未参加过城镇职工基本养老保险的人员：

• 对于这类人员，即使达到退休年龄，由于其从未参加过城镇职工基本养老保险，因此不能简单地按劳务关系处理。经审理如符合劳动关系成立条件的，应认定双方存在劳动关系。

四、实践中的差异与处理

• 在实践中，各地司法实践可能存在一定差异。对于虽已达到退休年龄但未享受养老保险待遇或领取退休金的人员返聘，有些地方可能根据具体情况仍会认定为劳动关系。
• 因此，在处理具体案件时，应结合当地司法实践和具体情况进行综合判断，并咨询专业法律人士的意见。

五、建议

• 对于用人单位和退休返聘人员来说，明确双方的法律关系至关重要。建议签订书面协议，明确工作内容、工作时间、劳动报酬、福利待遇、保密义务、违约责任等条款，以确保双方权益得到保障。
• 在签订协议前，应充分了解相关法律法规和司法解释的规定，避免因不了解法律规定而引发纠纷。

综上所述，退休返聘人员与用人单位之间的事实劳动关系认定是一个复杂的问题，需要根据相关法律法规、司法解释以及当地司法实践进行综合判断。在实际操作中，双方应明确法律关系，签订合适的书面协议，并遵守相关法律法规的规定，以确保双方的合法权益得到有效保护。