结论：劳务派遣合同生效期间非个人原因被用人单位减员退回是否违法，需根据具体情况判断，不能一概而论。以下从不同角度进行分析：
一、合法退回的情形
客观情况发生重大变化：
- 根据《劳务派遣暂行规定》第十二条，有下列情形之一的，用工单位可以将被派遣劳动者退回劳务派遣单位：
- （一）用工单位有劳动合同法第四十条第三项、第四十一条规定情形的；
- 其中，劳动合同法第四十条第三项指的是“劳动合同订立时所依据的客观情况发生重大变化，致使劳动合同无法履行，经用人单位与劳动者协商，未能就变更劳动合同内容达成协议的”。若因市场变化、政策调整等客观原因导致用工单位无法继续使用派遣员工，且已与员工协商变更劳动合同未果，此时退回派遣员工是合法的。
经济性裁员：
- 劳动合同法第四十一条规定了经济性裁员的情形，如依照企业破产法规定进行重整的、生产经营发生严重困难的等。若用工单位因经济性裁员需要减少人员，且符合法定程序，此时退回派遣员工也是合法的。
派遣协议期满或派遣岗位不存在：
- 若劳务派遣协议期满且不再续签，或者派遣岗位因各种原因不复存在，用工单位也有权将派遣员工退回劳务派遣单位。
二、违法退回的情形
无正当理由退回：
- 若用工单位无法提供合法、合理的退回理由，仅因个人喜好、内部关系等主观因素退回派遣员工，则构成违法退回。
违反法定程序退回：
- 即使存在合法退回的理由，若用工单位未按照法定程序进行，如未提前通知劳务派遣单位、未与派遣员工协商等，也可能构成违法退回。
歧视性退回：
- 若用工单位因派遣员工的性别、年龄、种族、宗教信仰等因素而退回，则构成歧视性退回，是违法的。
三、法律后果与建议
法律后果：
- 若用工单位违法退回派遣员工，劳务派遣单位和派遣员工均有权要求用工单位承担相应的法律责任，包括但不限于继续履行合同、支付赔偿金等。
建议：
- 对于派遣员工：若遭遇违法退回，应及时收集证据，如退回通知、协商记录等，并向劳务派遣单位或当地劳动监察部门投诉，必要时可通过法律途径维护自身权益。
- 对于用工单位：应严格遵守相关法律法规，确保退回行为的合法性和合理性。在退回前，应与劳务派遣单位充分沟通，并按照法定程序进行操作，以避免不必要的法律风险。
总结：劳务派遣合同生效期间非个人原因被用人单位减员退回是否违法，需根据退回的理由、程序以及是否存在歧视等因素综合判断。若您对此有进一步疑问或需要具体的法律帮助，请直接向我咨询。