结论前置：用人单位不与退休人员签订劳务合同并不违法，但出于明确双方权利义务、避免潜在纠纷的考虑，强烈建议签订书面劳务合同。以下是对此问题的详细分析：

一、法律性质与合同签订要求

1. 劳务关系而非劳动关系：退休人员因已开始享受养老保险待遇或领取退休金，根据《中华人民共和国劳动合同法实施条例》第二十一条，其与用人单位之间建立的是劳务关系，而非劳动关系。这一法律性质的界定是判断是否需要签订劳务合同的基础。

2. 无强制签订要求：劳务关系受《中华人民共和国民法典》合同编调整，双方基于平等自愿原则协商约定权利义务。现行法律法规并未强制要求劳务关系必须签订书面协议，因此，从法律层面讲，用人单位不与退休人员签订劳务合同并不构成违法。

二、签订劳务合同的必要性与重要性

1. 明确双方权利义务：尽管签订劳务合同不是法定义务，但书面合同能够清晰、具体地约定工作内容、劳务报酬、工作时间、福利待遇、违约责任等重要事项。这有助于双方明确各自的权利和义务，减少因理解不一致而产生的纠纷。

2. 纠纷解决依据：在发生纠纷时，书面劳务合同可以作为重要的证据，帮助快速、合理地划分责任，解决争议。缺乏书面合同可能导致权责不清晰、证据不足等问题，给纠纷的解决带来困难。

3. 保障双方权益：签订书面劳务合同不仅是对退休人员的保护，也是对用人单位的保护。它有助于确保双方的权益都能得到合理、有效的保障，减少不必要的法律风险和经济损失。例如，通过明确约定工作时间和休息休假，可以保障退休人员的休息权；通过明确约定劳务报酬的支付方式和时间，可以保障退休人员的劳动报酬权。

三、用人单位的责任与建议

1. 积极响应签订请求：如果退休人员提出签订劳务合同的要求，用人单位应积极响应，并与退休人员协商确定合同条款，以满足其合理诉求。这有助于建立良好的用工关系，提高退休人员的工作积极性和满意度。

2. 主动签订以避风险：即使退休人员未主动提出，用人单位也应出于实际操作的便利性和双方权益的保障考虑，主动提出并签订书面劳务合同。这有助于减少因未签订书面合同而可能产生的法律风险和经济损失。

3. 遵守法律规定：虽然不签订劳务合同不违法，但用人单位在用工过程中仍应遵守相关法律法规，确保用工行为的合法性和合规性。例如，不得要求退休人员从事超过其身体承受能力的工作，不得拖欠或克扣退休人员的劳务报酬等。

总结与建议：虽然用人单位不与退休人员签订劳务合同并不违法，但从实际操作和双方权益保障的角度出发，签订书面劳务合同是一个明智且必要的选择。它有助于明确双方的权利义务、解决纠纷、保障双方权益，并减少法律风险和经济损失。因此，建议用人单位在与退休人员建立劳务关系时，主动提出并签订书面劳务合同。如果您在劳动工伤或合同纠纷方面有任何疑问或需要进一步的法律帮助，请随时向我咨询。