结论：在用人单位不给加班费也不给调休的情况下，职工一般不可以直接拒绝加班，但特定情形下职工有权拒绝，且用人单位不支付加班费或不安排调休的行为违法。
职工是否可以拒绝加班
- 一般情况下不可以直接拒绝
- 根据我国相关法律规定，用人单位由于生产经营需要，经与工会和劳动者协商后可以延长工作时间，一般每日不得超过一小时；因特殊原因需要延长工作时间的，在保障劳动者身体健康的条件下延长工作时间每日不得超过三小时，但是每月不得超过三十六小时。这意味着在正常情况下，用人单位安排加班需要与劳动者协商一致，但劳动者不能直接拒绝用人单位合理的加班要求。例如，一家服装厂在旺季接到大量订单，需要加班赶工，在与工会和职工协商后安排加班，此时职工若无正当理由一般不能拒绝。
- 特定情形下可以拒绝
- 强迫加班：如果用人单位以暴力、威胁或者非法限制人身自由的手段强迫劳动者加班，劳动者有权拒绝，并且可以立即解除劳动合同，同时还可以向用人单位主张经济补偿。比如，用人单位以扣发工资、辞退等威胁手段强迫职工加班，职工有权拒绝并维护自身权益。
- 危及安全健康：当加班工作对劳动者的身体健康造成严重危害时，劳动者有权拒绝。例如，在高温、有毒有害等恶劣环境下长时间加班，可能危及劳动者生命健康，此时劳动者可以拒绝加班。
用人单位不支付加班费或不安排调休的违法性
- 不支付加班费违法
- 根据《劳动法》第四十四条规定，有下列情形之一的，用人单位应当按照下列标准支付高于劳动者正常工作时间工资的工资报酬：
- 安排劳动者延长工作时间的，支付不低于工资的百分之一百五十的工资报酬；
- 休息日安排劳动者工作又不能安排补休的，支付不低于工资的百分之二百的工资报酬；
- 法定休假日安排劳动者工作的，支付不低于工资的百分之三百的工资报酬。
- 如果用人单位不支付加班费，劳动者可以向劳动监察部门投诉，劳动监察部门会责令用人单位限期支付加班费；逾期不支付的，责令用人单位按应付金额百分之五十以上百分之一百以下的标准向劳动者加付赔偿金。
- 不安排调休违法（针对休息日加班）
- 对于休息日安排劳动者工作又不能安排补休的，用人单位应支付不低于工资的百分之二百的工资报酬。也就是说，休息日加班原则上应先安排调休，如果不能安排调休，才需要支付加班费。如果用人单位既不安排调休也不支付加班费，同样违反了法律规定，劳动者可以通过劳动仲裁等途径维护自己的合法权益。
给职工的建议
- 保留证据：职工要注意保留与加班相关的证据，如考勤记录、加班通知、工作安排等，以便在发生纠纷时能够证明自己加班的事实。
- 与用人单位协商：在发现用人单位不支付加班费或不安排调休时，职工可以先与用人单位进行协商，要求其按照法律规定支付加班费或安排调休。
- 寻求法律帮助：如果协商无果，职工可以向当地的劳动监察部门投诉，或者向劳动争议仲裁委员会申请仲裁，通过法律途径维护自己的合法权益。
如果你还有其他关于劳动工伤方面的问题，比如具体的加班费计算、劳动仲裁流程等，都可以直接向我咨询。