退休返聘人员与用人单位之间建立的是劳务关系，而非劳动关系。这一结论基于明确的法律依据、社会保险制度的规定以及双方权利义务关系的特征，以下从多个角度进行分析：
一、法律依据
《中华人民共和国劳动合同法》第四十四条：该条款明确规定，劳动者开始依法享受基本养老保险待遇的，劳动合同终止。这意味着当劳动者达到法定退休年龄并领取养老金时，其与用人单位之间的劳动合同关系自然终止。
《最高人民法院关于审理劳动争议案件适用法律问题的解释（一）》第三十二条：该解释进一步明确，用人单位与其招用的已经依法享受养老保险待遇或者领取退休金的人员发生用工争议而提起诉讼的，人民法院应当按劳务关系处理。这一规定为退休返聘人员的法律地位提供了明确的界定。
二、社会保险角度
退休返聘人员已开始享受基本养老保险待遇，根据社会保险制度的规定，他们无法再参加职工社会保险。因此，从社会保险缴纳的可行性来看，双方无法建立劳动关系，而更倾向于建立劳务关系。
三、权利义务特征
劳动关系：在劳动关系中，劳动者受到劳动法、劳动合同法等法律法规的全面保护，享有工资、福利、社会保险等待遇。同时，劳动者对用人单位具有从属性，包括人格从属性和经济从属性。
劳务关系：劳务关系则是一种民事法律关系，双方基于平等自愿的原则，通过签订劳务合同来明确各自的权利和义务。在劳务关系中，劳动者通常不享受劳动法规定的福利待遇，如社会保险、带薪年假等。退休返聘人员与用人单位之间的关系更符合劳务关系的特征，双方通过劳务合同明确工作内容、工作时间、薪酬待遇等条款，且不受劳动法中关于最低工资标准、加班工资、带薪年假等特殊规定的约束。
四、实际操作层面
社会保险费用：由于退休返聘人员已经享受了养老保险待遇，用人单位无需再为其缴纳社会保险费用，这进一步体现了双方之间建立的是劳务关系。
解除合同：双方在解除劳务合同时也无需遵循劳动法中关于经济补偿金等的特殊规定，这同样体现了劳务关系的灵活性。
五、特殊情况说明
尽管在一般情况下退休返聘人员与用人单位构成劳务关系，但在某些特殊情况下（如当地有特别规定或存在其他特殊情形），双方的关系认定可能会有所不同。例如，如果退休返聘人员并未开始享受基本养老保险待遇，或者用人单位与退休返聘人员之间有特别的约定，那么双方的关系可能会更接近于劳动关系。然而，这种情况相对较少，且需要具体分析。
总结与建议：
退休返聘人员与用人单位之间建立的是劳务关系，这一结论符合法律法规的明确规定，也体现了双方在实际操作中的灵活性和自主性。对于用人单位和退休返聘人员而言，明确这一法律关系有助于更好地维护各自的权益并促进双方的合作与发展。如果双方在合作过程中发生纠纷，应当依据民法和合同法等相关法律法规来处理，而不是依据劳动法。
如有任何疑问或需要进一步的法律建议，请直接向我咨询。