劳动合同解除协议可以不签，但建议尽量签订以避免后续纠纷。

首先，从法律层面来看，解除劳动合同并不绝对要求必须签订解除协议。若用人单位与劳动者就解除劳动合同事宜达成一致，即便没有签订书面协议，只要双方已实际履行解除劳动合同的行为，如劳动者停止工作、用人单位停发工资等，也可能构成事实上的解除。然而，这种方式存在风险，一旦发生争议，难以举证证明解除的具体情况。

其次，签订解除劳动合同协议有利于明确双方的权利义务，避免后续纠纷。协议中可以详细约定解除的原因、时间、经济补偿等关键内容，为双方提供更有力的保障。因此，从维护自身权益角度出发，建议尽量签订解除劳动合同协议。

最后，如果确实存在特殊情况无法签订协议，务必要留存好能证明解除劳动合同的相关证据，如通知、工作交接记录、工资发放变化等，以备不时之需。这样，在发生争议时，才能更有效地维护自己的合法权益。

总之，虽然解除劳动合同协议并非绝对强制，但签订协议能为双方提供更明确的保障，减少后续纠纷的风险。如果有任何关于劳动合同解除的疑问或需要进一步的法律帮助，请随时向我咨询。