劳务人员离职不返还生育津贴是否合法，需分情况讨论：

1. 若生育津贴属于用人单位垫付，且双方有明确约定
   根据《劳动合同法》及相关司法解释，若用人单位在劳务人员生育期间先行垫付了生育津贴（例如：社保未及时报销时由单位预支），且双方在劳动合同、规章制度或专项协议中明确约定“离职时需返还垫付部分”，则劳务人员离职后拒不返还可能构成违约。此时用人单位可通过劳动仲裁或诉讼主张返还，法院一般会支持合理诉求。

2. 若生育津贴由社保机构直接发放，用人单位无垫付行为
   生育津贴的本质是社保基金对生育女职工的补偿，若津贴已由社保机构直接支付至劳务人员个人账户，则该款项属于劳务人员合法所得。即使离职，用人单位也无权要求返还，否则可能涉嫌侵犯劳动者财产权。此时劳务人员有权拒绝返还，用人单位若强行扣款可能面临劳动监察处罚。

3. 特殊情形：用人单位以“福利”名义额外发放生育补贴
   若用人单位在社保津贴外，以企业福利形式额外向劳务人员发放了生育补贴（需有书面证据证明“福利”性质），且双方约定“离职时需返还”，则可能构成附条件的赠与合同。但此类约定可能因违反《劳动合同法》中“不得约定服务期与违约金（除专项培训、竞业限制外）”的规定而被认定无效，用人单位主张返还的诉求可能得不到支持。

实务建议：

• 对用人单位：若需规避风险，应在劳动合同或规章制度中明确生育津贴的垫付性质、发放条件及离职返还条款，并确保条款不违反法律强制性规定；
  
• 对劳务人员：若遭遇用人单位无理要求返还，可要求对方出示垫付凭证或约定依据，若无法提供则可拒绝返还，必要时向劳动监察部门投诉或申请仲裁。
  

如有具体案例细节（如津贴发放方式、合同约定内容等），可进一步向我咨询，我会结合证据材料为您分析法律风险。