针对您提出的“被留置官员家属不退赃怎么办”的问题，这是一个涉及法律程序和司法公正的重要议题。以下是我为您提供的详细解答：

首先，我们需要明确的是，如果被留置官员的家属明知赃款存在却故意留置并不退还，这种行为极有可能被定性为涉嫌掩盖或隐藏犯罪收益罪行。司法机关在面对此类情况时，会采取一系列措施来确保赃款的追回和法律的公正执行。

一、司法机关的调查与侦查

司法机关会全面深入地调查犯罪嫌疑人所有资金流动的轨迹，严密侦查那些被转移至其家属手中的具体金额以及涉案财物。这是为了确保能够准确掌握赃款的去向和数量，为后续的法律程序提供有力证据。

二、强制性措施

如果家属态度强硬，拒绝退赃，司法机关完全可以依据相关的法律程序，采取诸如查封、扣押、冻结家属名义下与涉案赃款有关联的资产等强制性措施。这些措施旨在迫使家属履行退赃义务，确保赃款的追回。

三、量刑影响

在整个刑事诉讼流程中，犯罪嫌疑人及其家属能够主动积极地归还赃款，这无疑将成为一个减轻其所应承担的刑罚程度的重要推定。相反，如果家属固执己见，决意不肯退还赃款，那么犯罪嫌疑人很有可能因此而在量刑方面丧失得到优惠处理的有利条件。这意味着，退赃情况会直接影响对犯罪嫌疑人的最终量刑。

四、家属的经济状况与退赃义务

如果家属确实因为经济困难而无法退赃，他们应及时向监委如实说明经济状况，并提供相关证明材料，如银行账户流水、资产清单等。这可以表明他们并非主观上拒绝退赃，而是确实不具备退赃的经济能力。然而，这并不意味着家属可以逃避退赃责任。一旦家属后续具备退赃能力，仍需履行退赃义务。

五、法律制度的捍卫

最后，我们需要认识到，法律制度会坚定不移地捍卫司法公正，全力以赴地追回赃款，以此来维护社会的公平正义。无论家属的态度如何，司法机关都会依法采取措施，确保赃款的追回和法律的公正执行。

综上所述，如果被留置官员的家属不退赃，司法机关会采取一系列措施来确保赃款的追回和法律的公正执行。家属应认识到退赃的重要性，并积极配合司法机关的工作。如果确实因为经济困难而无法退赃，也应及时向监委说明情况，并提供相关证明材料。