给退休返聘人员发解聘赔偿金不违法。具体分析如下：

一. 退休返聘人员与用人单位的关系

1. 退休返聘人员与用人单位签订的是劳务合同，而非劳动合同。根据《劳动合同法》第四十四条第二项的规定，劳动者开始享受养老保险待遇（即办理退休），劳动合同终止。因此，退休后的人员被用人单位返聘，双方形成的是劳务关系，不受《劳动合同法》调整。
2. 劳务关系是基于平等的民事权利义务关系，劳动者提供劳务服务，用人单位支付劳务报酬，双方的权利义务由双方协商一致约定。

二. 解聘赔偿金的支付

1. 由于退休返聘人员与用人单位之间不存在劳动关系，因此不适用《劳动合同法》中关于解除劳动合同经济补偿金的规定。
2. 退休返聘人员被解聘时，是否支付赔偿金应依据双方签订的劳务合同或聘用协议的约定。如果协议中有关于解聘赔偿的条款，且该条款不违反法律法规的强制性规定，那么用人单位应按照约定支付赔偿金。

三. 处理退休返聘人员解聘纠纷的法律依据

1. 根据《最高人民法院关于审理劳动争议案件适用法律若干问题的解释（三）》第七条的规定，用人单位与其招用的已经依法享受养老保险待遇或领取退休金的人员发生用工争议，向人民法院提起诉讼的，人民法院应当按劳务关系处理。
2. 因此，在处理退休返聘人员解聘纠纷时，应依据民事法律法规和双方签订的劳务合同或聘用协议来处理。

综上所述，给退休返聘人员发解聘赔偿金并不违法，但应依据双方签订的劳务合同或聘用协议的约定来执行。如果协议中没有相关约定或约定不明确，双方可以协商解决。如有进一步需要，您可以继续咨询我。