如果你不去单位，公司可能会依据其规章制度及旷工事实，单方面与你解除劳动关系。具体分析如下：

一. 公司解除劳动关系的法律依据

1. 《中华人民共和国劳动合同法》第三十九条：劳动者有下列情形之一的，用人单位可以解除劳动合同:（二）严重违反用人单位的规章制度的。若公司的规章制度中明确规定了旷工达到一定天数或次数属于严重违反规章制度，那么公司有权依据此条款与你解除劳动关系。

二. 旷工的法律后果

1. 旷工行为：若你确实存在旷工行为，且达到了公司规章制度中规定的可以解除劳动合同的程度，那么公司有权单方面解除与你的劳动关系。
2. 劳动关系解除：一旦劳动关系被解除，你将失去该工作，同时可能面临无法获得经济补偿等后果。

三. 你的应对方式

1. 核实旷工情况：首先，你需要核实自己是否存在旷工行为，以及旷工的天数或次数是否达到了公司规章制度中规定的可以解除劳动合同的程度。
2. 与公司沟通：如果你认为自己没有旷工或旷工情况未达到解除劳动关系的程度，你可以与公司进行沟通，解释情况并提出异议。
3. 保留证据：无论结果如何，你都应该保留好与公司沟通的记录、劳动合同、公司规章制度等相关证据，以备不时之需。

我建议，在收到公司的解除劳动关系通知后，你应尽快核实情况并与公司沟通。如果沟通无果，且你认为公司的解除行为不合法，你可以考虑通过法律途径维护自己的权益。如有进一步需要，你可以继续咨询我。