工厂不给加班算违法的情况需要分情况讨论，具体如下：
如果工厂未与劳动者协商一致，单方面决定不加班且不支付任何补偿或安排调休，这本身不直接构成违法，但关键在于工厂是否因此采取了不合理的处罚措施：
- 根据《中华人民共和国劳动法》及相关规定，加班应当是自愿的，且需要与劳动者协商一致。工厂不能强制劳动者加班，同样，劳动者也有权拒绝加班。
- 如果工厂因为劳动者不加班而对其进行罚款、扣工资、降职降薪等处罚，这些行为是违法的。因为劳动者有权拒绝非自愿的加班，且工厂无权因劳动者不加班而对其进行经济处罚。
如果工厂安排了加班但未支付加班费，这是违法的：
- 根据《中华人民共和国劳动法》第四十四条，用人单位安排劳动者延长工作时间的，应支付不低于工资的百分之一百五十的工资报酬；休息日安排劳动者工作又不能安排补休的，应支付不低于工资的百分之二百的工资报酬；法定休假日安排劳动者工作的，应支付不低于工资的百分之三百的工资报酬。
- 如果工厂未按照这些标准支付加班费，劳动者有权要求工厂支付，并可以通过法律途径维护自己的合法权益。
法律建议与维权途径：
- 与工厂协商：首先，劳动者可以尝试与工厂进行友好协商，明确表达自己的立场和权益，要求工厂尊重自己的选择并支付应得的加班费（如果存在加班情况）。
- 向劳动监察部门投诉：如果协商无果，劳动者可以向当地的劳动监察部门投诉工厂的违法行为。劳动监察部门将依法展开调查，并责令工厂限期改正，支付加班费或撤销不合理的处罚。
- 申请劳动仲裁或提起诉讼：如果工厂逾期不支付加班费或继续实施不合理的处罚，劳动者可以向劳动争议仲裁委员会申请仲裁，或者向人民法院提起诉讼。在这两个过程中，劳动者需要提供充分的证据（如加班记录、考勤记录、工资条、处罚通知等）来证明自己的权益受到了侵害。
可能面临的法律后果：
- 对于工厂而言，如果因其违法行为被劳动监察部门查处或被劳动者通过法律途径维权成功，工厂可能需要支付加班费、赔偿金，并可能面临行政处罚（如罚款、警告等）。
- 对于劳动者而言，如果能够通过法律途径成功维权，将能够获得应得的加班费和可能的赔偿金，同时维护了自己的合法权益和尊严。
总之，工厂不给加班本身不直接构成违法，但关键在于工厂是否因此采取了不合理的处罚措施或未支付加班费。劳动者在遇到此类情况时，应勇敢拿起法律武器，通过协商、投诉、仲裁或诉讼等途径来维护自己的合法权益。如果你有任何具体的法律问题或需要进一步的帮助，请直接向我咨询。