结论：根据不同情况，工厂是否需要赔偿有所不同，具体如下：

1. 若返聘期间形成的是劳务关系：

   • 一般情况下，工厂不需要因不续签返聘合同而进行赔偿。达到退休年龄后，您与工厂签订返聘合同，此时双方建立的是劳务关系，而非劳动关系。劳务关系中，合同到期不续签，法律并未规定用人单位需要支付经济补偿。
   • 不过，如果返聘合同中有明确约定不续签需要支付一定补偿，那么工厂应当按照合同约定履行。例如合同中写明“合同期满，若一方不续签，需向另一方支付相当于一个月劳务报酬的补偿金”，这种情况下工厂就需要按约支付。

2. 若存在未依法缴纳社保等违法行为影响您权益的情况：

   • 虽然您已经达到退休年龄且签订返聘合同，但如果工厂在您工作期间（达到退休年龄前）存在未依法为您缴纳社保等违法行为，导致您无法正常享受社保待遇，您可以要求工厂承担相应责任。比如，因工厂未缴纳社保，您无法领取养老金，那么工厂可能需要赔偿您相应的养老金损失。不过，这需要您提供相关证据证明工厂的违法行为以及您所遭受的损失。

3. 若工厂存在其他过错导致合同不续签：

   • 如果是因为工厂的原因，如无故刁难、提供不合理的工作条件等过错行为，导致您不愿意续签返聘合同或者合同无法续签，您可以与工厂协商要求一定的补偿。若协商不成，您可以通过法律途径，如向法院起诉，要求工厂承担相应的赔偿责任，但需要您提供证据证明工厂存在过错以及该过错与合同不续签之间的因果关系。