关于“擅自解除劳动合同要向对方赔偿吗”这一问题，结论是因解除主体的不同而有所差异。具体分析如下：
劳动者擅自解除劳动合同：
- 如果劳动者擅自离职，且给用人单位造成了损失（如招收录用费用、培训费用等），劳动者依法需要承担赔偿责任。
- 法律依据：《劳动合同法》及相关法律法规并未直接规定劳动者擅自离职的赔偿责任，但根据民法的一般原则，因一方过错导致另一方损失的，过错方应承担赔偿责任。
用人单位擅自解除劳动合同：
- 用人单位若无正当理由擅自解除与劳动者的劳动合同，则构成违法解除，需按经济补偿标准的二倍向劳动者支付赔偿金。
- 赔偿金计算方式：按劳动者在本单位工作的年限，每满一年支付两个月工资的标准向劳动者支付。六个月以上不满一年的，按一年计算；不满六个月的，向劳动者支付一个月工资的赔偿金。
- 法律依据：《中华人民共和国劳动合同法》第四十八条、第八十七条。
综上所述，擅自解除劳动合同是否需要赔偿，取决于解除合同的主体及具体情况。如果是劳动者擅自离职且给用人单位造成损失，劳动者需要承担赔偿责任；如果是用人单位擅自解除劳动合同，且无正当理由，则用人单位需要按法律规定向劳动者支付赔偿金。如有进一步疑问或需要详细咨询，请直接向我提问。