结论：非耕地上建设榨油厂是否违法，需根据土地性质、规划用途及是否履行合法审批手续等多方面因素综合判断。以下从不同角度详细分析：
一、土地性质与规划用途
非耕地不等于建设用地：
- 非耕地通常指的是除耕地以外的土地，如林地、草地、未利用地等。但并非所有非耕地都可以直接用于建设。
- 根据《土地管理法》等相关法律法规，土地用途分为农用地、建设用地和未利用地。建设榨油厂通常需要使用建设用地。
规划用途的约束：
- 即使某块土地是非耕地，但如果其规划用途并非工业用地或商业用地，而是用于农业、林业、生态保护等其他用途，那么在该土地上建设榨油厂就可能违反规划用途，构成违法。
二、合法审批手续
建设用地审批：
- 如果要在非耕地上建设榨油厂，且该土地符合建设用地的条件，那么必须依法办理建设用地审批手续，包括土地征收、农用地转用审批等。
- 未经批准擅自改变土地用途或进行建设的，将面临法律责任。
规划许可与施工许可：
- 除了土地审批外，建设榨油厂还需要获得城乡规划部门的规划许可和建设部门的施工许可。
- 这些许可确保了建设项目的合法性和合规性，是避免违法建设的重要环节。
三、可能面临的法律后果
行政处罚：
- 如果未经批准在非耕地上建设榨油厂，可能面临土地管理部门的行政处罚，包括责令停止建设、限期拆除、罚款等。
刑事责任：
- 在极端情况下，如果非法占用农用地（包括非耕地但被规划为农用地的土地）数量较大，造成农用地大量毁坏的，还可能构成非法占用农用地罪，面临刑事责任。
四、建议与措施
查询土地性质与规划用途：
- 在建设榨油厂前，应首先查询该土地的性质和规划用途，确保符合建设用地的条件。
办理合法审批手续：
- 依法办理建设用地审批、规划许可和施工许可等手续，确保建设项目的合法性和合规性。
咨询专业律师：
- 由于土地法律问题复杂多变，建议在建设前咨询专业律师，以获取更具体、更专业的法律意见。
总结：非耕地上建设榨油厂是否违法，需综合考虑土地性质、规划用途及是否履行合法审批手续等多方面因素。为确保建设项目的合法性和合规性，建议在建设前进行充分的法律咨询和规划。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。