结论：猪饲料运输驾驶员下班不给回家是否违法，不能一概而论，需根据具体情况判断，主要涉及劳动合同约定、公司规章制度合法性以及是否存在特殊工作安排等因素。以下从不同角度进行分析：
劳动合同与规章制度角度
- 劳动合同约定：如果驾驶员与公司签订的劳动合同中明确规定了工作时间、休息休假等条款，且下班后不让回家违反了这些约定，那么公司的行为就构成了违约。驾驶员有权依据劳动合同的约定，要求公司履行合同义务，保障其休息休假的权利。
- 公司规章制度合法性：即使公司规章制度中有关于下班后不让回家的规定，也需要判断该规定是否合法。根据《中华人民共和国劳动法》等相关法律法规，公司规章制度不得违反法律、法规的规定，否则无效。如果公司的规定侵犯了驾驶员的合法权益，如休息权、回家权等，那么该规定是不合法的，驾驶员可以拒绝遵守，并有权向相关部门投诉或寻求法律援助。
特殊工作安排角度
- 紧急运输任务：如果驾驶员在运输过程中遇到紧急情况，如交通堵塞、车辆故障等，导致无法按时下班回家，且这种情况是出于工作需要而非公司故意安排，那么这通常不被视为违法行为。但公司应尽快安排驾驶员休息或提供必要的帮助。
- 公司临时安排：如果公司因特殊原因（如突发订单、客户紧急需求等）临时安排驾驶员加班或延迟下班，且这种安排是合理的、必要的，并且公司按照法律规定支付了加班费或安排了补休，那么这通常也不被视为违法行为。但公司应事先与驾驶员沟通并取得其同意。
违法行为及后果角度
- 违法行为认定：如果公司无正当理由拒绝驾驶员下班回家，且这种行为违反了劳动合同约定或公司规章制度（且该规章制度合法），或者侵犯了驾驶员的合法权益（如休息权、回家权等），那么公司的行为就可能构成违法行为。
- 法律后果：驾驶员有权向劳动监察部门投诉公司的违法行为，要求公司改正并赔偿损失。如果因公司的违法行为给驾驶员造成了人身伤害或财产损失，驾驶员还可以依法向公司追究民事赔偿责任。在严重情况下，如果公司的行为构成了犯罪（如非法拘禁等），驾驶员还可以向公安机关报案，要求追究公司的刑事责任。
建议：
- 驾驶员应仔细阅读劳动合同和公司规章制度，了解自己的权利和义务。
- 如果遇到公司无正当理由拒绝下班回家的情况，驾驶员应与公司沟通并尝试协商解决。
- 如果协商无果，驾驶员可以向劳动监察部门投诉或寻求法律援助，以维护自己的合法权益。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。