结论：家属是否需要退赃，不能一概而论，需分情况讨论，具体如下：

1. 若犯罪嫌疑人或被告人明确表示赃款未交给家属：

   • 在这种情况下，家属确实没有拿过赃款，从法律事实的角度来看，家属没有退赃的义务。因为退赃通常是指犯罪嫌疑人、被告人或其家属将犯罪所得的财物退还给被害人或司法机关，以减轻或消除犯罪行为带来的不良后果。如果家属并未实际占有赃款，那么要求家属退赃就缺乏事实依据。
   • 然而，司法实践中，有时为了促使犯罪嫌疑人、被告人积极退赃，争取从宽处理，司法机关可能会建议或要求家属协助退赃。但这并不意味着家属有法律上的强制退赃义务，家属可以基于自身情况和意愿来决定是否协助。

2. 若存在误解或信息不对称的情况：

   • 有时候，犯罪嫌疑人或被告人可能出于保护家属或其他原因，未如实告知家属赃款的下落，或者家属对赃款的性质、来源等存在误解。在这种情况下，家属可能误以为自己没有拿过赃款，而实际上却可能间接占有了赃款或赃款转化后的财物。
   • 如果家属后来发现或得知自己实际占有了赃款或相关财物，那么从法律义务和道德责任的角度来看，家属应当积极退赃，以配合司法机关的侦查和审判工作，同时也体现对犯罪行为的悔过态度。

3. 家属应如何应对：

   • 家属在接到退赃通知时，首先应当保持冷静，与犯罪嫌疑人或被告人进行充分沟通，了解赃款的具体情况。
   • 如果家属确实没有拿过赃款，可以向司法机关说明情况，并提供相关证据或线索以支持自己的主张。
   • 如果家属对赃款情况存在疑问或不确定，可以咨询专业律师，以获取更准确的法律意见和指导。

建议：在整个过程中，家属应当积极配合司法机关的工作，如实陈述事实，提供证据或线索，以维护自己的合法权益和促进案件的公正处理。如果还有其他疑问或需要进一步的法律帮助，请随时向我咨询。