退休返聘的员工劳务合同没有到期，用人单位在遵守合同约定和法律规定的前提下，可以选择不用他。但需注意确保解除行为的合法性和合理性，避免损害退休返聘人员的合法权益。

详细分析：

1. 法律性质明确：

   • 退休人员因已享受基本养老保险待遇或达到法定退休年龄，其与用人单位之间的用工关系明确为劳务关系而非劳动关系。因此，双方签订的是劳务合同，非劳动合同，不受《劳动合同法》中关于用人单位不能随意解除劳动合同等条款的限制。

2. 合同解除条件：

   • 劳务合同的解除主要遵循民事合同的相关规定，特别是双方的约定。若劳务合同中明确规定了合同解除的条件，并且这些条件已经被满足，那么用人单位可以依据合同约定解除劳务合同。
   • 如果合同中没有明确约定解除条件，或者解除条件未成就，用人单位在解除劳务合同时应谨慎处理，确保解除行为的合法性和合理性，避免无故损害退休返聘人员的合法权益。

3. 遵循原则与注意事项：

   • 在解除劳务合同时，用人单位应遵循诚实信用原则，与退休返聘人员进行充分沟通，解释解除原因，并尽量协商达成一致意见。
   • 若因用人单位的原因导致劳务合同无法继续履行，并给退休返聘人员造成了实际损失，用人单位需承担相应的赔偿责任。

4. 特殊情况处理：

   • 合同中有特殊约定时，如自动续签条款或特定解除理由，用人单位应遵守这些约定，否则可能面临违约责任。
   • 即使劳务合同未到期，若双方协商一致或出现合同约定的解除情形，用人单位也可以提前解除劳务关系，但需确保解除行为的合法性和合理性。

综上所述，退休返聘的员工劳务合同没有到期时，用人单位在遵守合同约定和法律规定的前提下，可以选择不用他。但在实际操作过程中，应谨慎处理，确保解除行为的合法性和合理性，以避免可能的法律风险和纠纷。如有任何疑问或需要进一步的法律支持，请直接向我咨询。