关于人才补贴离职后是否需要退还给政府的问题，这主要取决于具体的补贴政策和地区规定。不同地区、不同类型的补贴，其要求和规定可能会有所不同。

以您提供的两个地区为例：

1. 宿迁市：

   • 宿迁市的人才生活补贴主要是面向“6+3+x”产业链企业全职引进的人才或自主创业人才等特定群体。
   • 如果人才因各种原因与原单位解除劳动合同关系，但新单位符合申报条件且人才社保未中断不超过3个月，且仍在中心城区，那么可以继续申请生活补贴。
   • 如果离开中心城区，则未兑现部分不予兑现。这里并没有明确提到需要退还已领取的补贴。

2. 绍兴市：

   • 绍兴市对毕业后首次在绍兴工作，且签订3年以上劳动合同，承诺工作5年的高校毕业生提供房票补贴。
   • 如果人才不满5年终止在绍工作或转让房产，则需要从离绍或转让当月开始，以月为单位，按比例将房票补贴款退回财政指定账户。

从上述两个例子可以看出，是否需要退还补贴取决于具体的政策规定。有些地区可能规定在特定条件下（如未满服务期离职）需要退还部分或全部补贴，而有些地区则可能没有这样的规定。

一般性建议：

• 如果您正在领取或计划申请人才补贴，建议您仔细阅读并理解相关政策文件，特别是关于离职后补贴处理的部分。
• 如果您对政策有疑问或不确定，可以咨询当地的人力资源和社会保障部门或相关政策制定机构，以获取最准确和权威的信息。
• 在离职前，最好与雇主或相关部门沟通，了解离职后补贴的具体处理方式，以避免不必要的麻烦和损失。

总之，人才补贴离职后是否需要退还给政府，取决于具体的政策规定和地区要求。因此，在做出决策前，请务必了解并遵守相关政策规定。