退休返聘人员与用人单位之间建立的是劳务关系，而非劳动关系。这一结论有着明确的法律依据和实际操作层面的考量，以下为您详细解释：
法律依据
《中华人民共和国劳动合同法实施条例》第二十一条：该条例明确规定，劳动者达到法定退休年龄时，劳动合同终止。这意味着，一旦劳动者退休，他们就不再具备与用人单位建立劳动关系的主体资格。
《中华人民共和国劳动合同法》第四十四条：此条款进一步细化了劳动合同终止的情形，其中包括劳动者开始依法享受基本养老保险待遇。这同样表明，退休人员因已享受养老保险待遇，其与用人单位的劳动合同关系即告终止。
最高人民法院《关于审理劳动争议案件适用法律若干问题的解释（三）》第七条：该解释明确指出，用人单位与已享受养老保险待遇或领取退休金的人员之间的用工争议，应按劳务关系处理。这为退休返聘关系的法律性质提供了直接的司法解释依据。
社会保险角度
退休返聘人员已开始享受基本养老保险待遇，根据社会保险制度的规定，他们无法再参加职工社会保险。因此，从社会保险缴纳的可行性来看，双方也无法建立劳动关系，因为劳动关系通常伴随着社会保险的缴纳。
权利义务特征
劳务关系与劳动关系在权利义务上存在显著差异。在劳务关系中，双方的权利和义务主要依据双方自愿签订的劳务合同来确定，具有较大的灵活性。相比之下，劳动关系中的权利义务更多由法律强制规定，如最低工资标准、加班工资、带薪年假等。退休返聘人员与用人单位之间的关系更符合劳务关系的特征，双方通过劳务合同明确工作内容、工作时间、薪酬待遇等条款。
实际操作层面
在实际操作中，由于退休返聘人员已经享受了养老保险待遇，用人单位无需再为其缴纳社会保险费用。同时，双方在解除劳务合同时也无需遵循劳动法中关于经济补偿金等的特殊规定。这种灵活性使得退休返聘成为一种受欢迎的用工方式，特别是对于那些需要利用退休人员专业技能或经验的用人单位来说。
特殊情况说明
尽管在一般情况下退休返聘人员与用人单位构成劳务关系，但在某些特殊情况下（如当地有特别规定或存在其他特殊情形），双方的关系认定可能会有所不同。因此，在实际操作中，建议用人单位和退休返聘人员根据具体情况进行具体判断，并咨询专业法律人士的意见。
综上所述，退休返聘人员与用人单位之间建立的是劳务关系。这一结论不仅符合法律法规的明确规定，也体现了双方在实际操作中的灵活性和自主性。对于用人单位和退休返聘人员而言，明确这一法律关系有助于更好地维护各自的权益并促进双方的合作与发展。