结论：单位以到法定退休年龄为由辞退但不给离职手续，这种行为是否违法需分情况讨论，若劳动者已开始依法享受基本养老保险待遇，单位不违法但应办理离职手续；若劳动者未享受基本养老保险待遇，单位可能构成违法辞退。
情况一：劳动者已开始依法享受基本养老保险待遇
法律依据：
- 根据《中华人民共和国劳动合同法》第四十四条第二项规定，劳动者开始依法享受基本养老保险待遇的，劳动合同终止。
- 在这种情况下，单位以劳动者达到法定退休年龄为由终止劳动合同，是合法的。但单位仍需按照法律规定为劳动者办理离职手续，包括出具终止劳动合同的证明、办理档案和社会保险关系转移手续等。
法律后果：
- 如果单位不办理离职手续，劳动者可以向劳动监察部门投诉，要求单位履行法定义务。
- 劳动者也可以依法申请劳动仲裁，要求单位确认劳动合同终止并办理离职手续。
情况二：劳动者未开始依法享受基本养老保险待遇
法律依据：
- 根据《中华人民共和国劳动合同法》及相关司法解释，仅因劳动者达到法定退休年龄，并不能直接导致劳动合同终止，除非劳动者已经依法享受基本养老保险待遇。
- 如果劳动者虽然达到法定退休年龄，但并未享受基本养老保险待遇，单位以此为由辞退劳动者且不办理离职手续，可能构成违法辞退。
法律后果：
- 劳动者可以依法向劳动监察部门投诉，要求单位纠正违法行为并办理离职手续。
- 劳动者也可以申请劳动仲裁，要求单位支付违法辞退的赔偿金（通常为经济补偿金的两倍），并确认劳动合同终止及办理离职手续。
额外建议
收集证据：
- 劳动者应收集与单位存在劳动关系的证据，如劳动合同、工资单、工作证等。
- 收集单位辞退的证据，如辞退通知、聊天记录、录音等。
- 收集未享受基本养老保险待遇的证据，如社保缴纳记录、未领取养老金的证明等。
咨询与维权：
- 劳动者在遇到此类问题时，应及时咨询专业律师，了解自己的权益和维权途径。
- 根据律师的建议，选择合适的维权方式，如投诉、仲裁或诉讼等。
总结：单位以到法定退休年龄为由辞退但不给离职手续是否违法，取决于劳动者是否已开始依法享受基本养老保险待遇。无论哪种情况，单位都应依法为劳动者办理离职手续。如果单位不履行法定义务，劳动者可以通过投诉、仲裁或诉讼等方式维护自己的合法权益。如果你有进一步的法律问题或需要具体的法律帮助，可以直接向我咨询。