单位在特定情形下确实可以主张解除劳动合同无效，但这并非单位可以任意行使的权利，而是需要依据法定情形和程序来进行。以下从不同角度为您详细分析：
一、单位主张解除劳动合同无效的法定情形
协商解除中的无效情形：
- 如果单位与劳动者协商解除劳动合同时，存在欺诈、胁迫或乘人之危等情形，导致劳动者在违背真实意思的情况下签订解除协议，那么该解除协议可能被认定为无效。例如，单位以不支付工资为威胁，迫使劳动者同意解除劳动合同，这种情况下，劳动者有权主张解除无效。
过错解除中的无效情形：
- 根据《劳动合同法》第三十九条，单位可以在劳动者存在特定过错时解除劳动合同。但如果单位在解除时，未能充分证明劳动者存在这些过错，或者解除程序不合法（如未事先通知工会等），那么解除可能被认定为无效。例如，单位仅凭主观臆断认为劳动者严重违反规章制度，而未提供充分证据，这种情况下解除可能无效。
非过错解除中的无效情形：
- 根据《劳动合同法》第四十条，单位在特定非过错情形下可以解除劳动合同，但需提前三十日以书面形式通知劳动者或额外支付一个月工资。如果单位未履行这些程序，或者解除的理由不充分（如劳动者患病但医疗期未满等），那么解除可能被认定为无效。
经济裁员中的无效情形：
- 在经济裁员情况下，单位需遵循法定程序，如提前向工会或全体职工说明情况、听取意见、向劳动行政部门报告等。如果单位未履行这些程序，或者裁员方案不合法（如裁员对象选择不当等），那么裁员可能被认定为无效。
二、单位主张解除劳动合同无效的法律后果
- 如果单位主张解除劳动合同无效并得到法院或仲裁机构的支持，那么劳动者有权要求继续履行劳动合同，或者要求单位支付违法解除劳动合同的赔偿金。赔偿金的标准通常为经济补偿标准的两倍。
三、对劳动者的建议
- 保留证据：劳动者在面临单位解除劳动合同时，应尽可能保留相关证据，如解除通知、工资单、考勤记录等，以便在主张解除无效时提供有力支持。
- 及时维权：如果劳动者认为单位解除劳动合同无效，应及时向劳动仲裁机构或法院提起仲裁或诉讼，以免超过时效期间。
- 咨询专业律师：在处理此类纠纷时，劳动者可以咨询专业律师，以获取更具体的法律建议和帮助。
总结来看，单位在特定情形下可以主张解除劳动合同无效，但需要依据法定情形和程序来进行。如果您作为劳动者面临此类问题，或者作为单位需要处理此类纠纷，都可以直接向我咨询，我会根据您的具体情况提供详细的法律建议。