离职时是否必须要签解除劳动合同关系确认书，这个问题其实取决于公司与劳动者的具体意愿，法律对此并没有做出强制性的规定。

从法律的角度来看，《劳动合同法》第五十条规定，用人单位应当在解除或者终止劳动合同时出具解除或者终止劳动合同的证明，并在十五日内为劳动者办理档案和社会保险关系转移手续。这意味着，单位有义务在解除或终止劳动合同时为劳动者出具证明，但并未强制要求必须签订解除劳动合同的协议。

然而，尽管法律没有强制要求，签订解除劳动合同关系确认书仍然有其重要性。这份协议能够明确双方的权利和义务，包括离职时间、工资结算、经济补偿等重要事项。通过签订这样的协议，可以避免后续可能产生的劳动纠纷，为双方提供一个清晰的权益保障。

因此，虽然离职时不一定要签解除劳动合同关系确认书，但为了保障自身的权益，明确双方的权利和义务，避免可能的纠纷，建议劳动者在离职时最好还是与单位签订这份协议。当然，如果双方都有明确的意愿并且达成一致，也可以选择不签订，这完全取决于双方的具体情况和意愿。