单位给发解除劳动合同通知书，不接收的话，通知书本身通常不会被“退回去”在物理意义上，但会以其他方式产生法律效力。以下从几个角度详细分析：

1. 通知书的送达方式与法律效力：

   • 根据《劳动合同法》及相关法律规定，解除劳动合同的通知应当以书面形式送达劳动者。送达方式可以包括直接送达、邮寄送达、公告送达等。
   • 如果单位选择直接送达而劳动者拒绝接收，单位可以邀请有关基层组织或者所在单位的代表到场，说明情况，在送达回证上记明拒收事由和日期，由送达人、见证人签名或者盖章，把诉讼文书留在受送达人的住所；也可以把诉讼文书留在受送达人的住所，并采用拍照、录像等方式记录送达过程，即视为送达。
   • 若单位选择邮寄送达，只要邮寄地址正确且已签收（包括他人代收），即视为送达。劳动者不接收或拒收，并不影响通知书的法律效力。

2. 不接收通知书的法律后果：

   • 劳动者不接收解除劳动合同通知书，并不意味着单位不能解除劳动合同。单位可以通过合法途径证明已履行通知义务，如上述的送达回证、邮寄签收记录等。
   • 一旦单位能够证明已合法送达解除劳动合同通知书，且解除理由符合法律规定（如劳动者严重违反单位规章制度、不能胜任工作等），则劳动合同自通知书送达之日起解除。
   • 劳动者不接收通知书，可能错过了解除劳动合同后的相关权益告知（如经济补偿金的支付、离职手续的办理等），但这并不影响单位依法解除劳动合同的效力。

3. 劳动者的应对建议：

   • 如果劳动者对单位解除劳动合同的决定有异议，应当积极接收通知书，并在法定期限内（通常是收到通知书之日起十五日内）向劳动争议仲裁委员会申请仲裁，维护自己的合法权益。
   • 如果劳动者确实无法接收通知书（如因出差、生病等原因），应当及时与单位沟通，说明情况，并协商解决方案。避免因为不接收通知书而错过维权时机。

总结来说，单位给发解除劳动合同通知书，劳动者不接收并不会阻止通知书的法律效力。单位可以通过合法途径证明已履行通知义务，并依法解除劳动合同。劳动者应当积极应对，及时接收通知书并了解自己的权益和义务。如果有任何疑问或需要进一步的法律帮助，请随时向我咨询。