结论：单位在给员工调整工作地点而员工不愿意且协商不成的情况下，不能直接解除劳动关系，否则可能构成违法解除，需承担相应的法律责任。不过，若符合特定法定情形，单位可依法解除劳动关系。以下为你详细分析：

一般情况下单位不能随意解除劳动关系

从劳动法的角度来看，工作地点是劳动合同的重要条款之一。根据《中华人民共和国劳动合同法》第三十五条规定，用人单位与劳动者协商一致，可以变更劳动合同约定的内容。变更劳动合同，应当采用书面形式。这意味着，单位若要调整员工的工作地点，必须与员工进行协商，并达成一致意见。如果员工不愿意调整工作地点，且双方协商不成，单位不能单方面强行解除劳动关系。

例如，小李在一家公司工作，合同中约定的工作地点是市区A。后来公司因业务调整，想将小李调到市区B工作，但小李认为市区B离家太远，交通不便，不同意调动。此时公司若未经小李同意，直接解除与小李的劳动关系，就违反了法律规定。

符合法定情形时单位可解除劳动关系

虽然一般情况下单位不能随意解除劳动关系，但如果符合以下法定情形，单位可以依法解除劳动关系，且无需支付经济补偿金或者只需支付较低标准的经济补偿金：

1. 员工严重违反单位规章制度：如果单位有明确的规章制度规定，员工拒绝合理的工作地点调整属于严重违反规章制度的行为，且该规章制度经过民主程序制定并已向员工公示，那么在员工拒绝调整且协商不成的情况下，单位可以依据规章制度解除劳动关系。
   • 例如，某公司规章制度中明确规定，员工应服从公司合理的工作安排，包括工作地点的调整。若员工无正当理由拒绝，视为严重违反规章制度，公司有权解除劳动合同。小张是该公司员工，公司因业务发展需要将其工作地点从本地调整到邻市，小张以各种理由拒绝，且经多次协商无果。公司依据规章制度解除了与小张的劳动关系，这种情况下公司的行为可能是合法的。
2. 员工不能胜任工作，经过培训或者调整工作岗位，仍不能胜任工作：如果单位能够证明员工不能胜任原工作地点的工作，经过培训或者调整到其他合理工作岗位后，员工仍然不能胜任，那么单位可以解除劳动关系。不过，这里的工作地点调整通常是作为不能胜任工作的一种处理方式，且需要满足一定的程序和条件。
   • 例如，小王在一家销售公司工作，由于业绩一直不达标，被公司认定为不能胜任销售工作。公司先对小王进行了培训，但培训后小王的业绩仍未有明显提升。于是公司决定将小王调整到后勤岗位，可小王还是无法胜任。在这种情况下，公司若解除与小王的劳动关系，需要按照法律规定支付相应的经济补偿金。

单位违法解除劳动关系的法律后果

如果单位在不符合法定情形的情况下，仅因员工拒绝工作地点调整且协商不成就解除劳动关系，那么单位的行为构成违法解除。根据《中华人民共和国劳动合同法》第八十七条规定，用人单位违反本法规定解除或者终止劳动合同的，应当依照本法第四十七条规定的经济补偿标准的二倍向劳动者支付赔偿金。

经济补偿的计算公式为：经济补偿按劳动者在本单位工作的年限，每满一年支付一个月工资的标准向劳动者支付。六个月以上不满一年的，按一年计算；不满六个月的，向劳动者支付半个月工资的经济补偿。赔偿金则是经济补偿的二倍。

例如，小赵在某公司工作了3年，月工资为5000元。公司因小赵拒绝工作地点调整且协商不成，违法解除了与小赵的劳动关系。那么公司应支付给小赵的赔偿金为：\(5000×3×2 = 30000\)元。

综上所述，单位在调整员工工作地点时，应谨慎处理，尽量与员工协商一致。若协商不成，要依据法律规定判断是否可以解除劳动关系，避免因违法解除而承担不必要的法律责任。如果你还有其他关于劳动纠纷方面的问题，可以直接向我咨询。