退休人员职业年金的发放单位并不是固定的，而是根据具体的政策和规定来确定。一般来说，职业年金是由单位和工作人员个人共同缴纳的，作为机关事业单位基本养老保险的补充养老保险制度。

在退休后，符合领取职业年金条件的人员，其职业年金待遇的申请与基本养老保险待遇申请一并受理。这意味着，职业年金的发放可能与基本养老保险的发放有一定的关联性。具体来说，职业年金原则上与基本养老金同步发放，从组织确定其退休的次月起开始发放。

然而，也需要注意到，职业年金的发放还可能受到其他因素的影响。例如，参保单位需要完成过渡期内基本养老保险和职业年金的清算汇缴工作，不存在欠费情况，退休人员职业年金个人账户中记账部分和记账利息必须有财政拨付资金记实，以及需要重算基本养老保险待遇等。只有同时满足这些条件，才能领取到职业年金待遇。

此外，职业年金的发放方式也可能因地区和政策的不同而有所差异。有些地方可能由社保局统一发放，而有些地方则可能仍由单位负责发放。因此，具体的情况还需要根据当地的政策和规定来确定。

综上所述，退休人员职业年金的发放单位并不是固定的，而是可能由单位或社保局等机构负责。为了获取最准确的信息，建议咨询当地的社保机构或相关部门，以了解具体的发放单位和流程。