一般情况下，厂里不能仅因为你不加班就辞退你。下面我详细为你解释一下相关的法律规定和具体情况：
法律框架与原则
根据《中华人民共和国劳动法》及相关规定，用人单位在解除劳动合同时必须遵循法定条件和程序。对于员工拒绝加班是否构成合法解除劳动合同的理由，需结合多个因素综合判断：
加班的合法性前提：用人单位安排加班需符合《劳动法》第四十一条规定，即每日加班不超过1小时（特殊原因可延长至3小时），每月累计不超过36小时，且需与员工协商。未经协商或超出法定时长的强制加班要求无效。
劳动合同的约定内容：若劳动合同明确约定岗位需经常加班且员工知晓并签字确认，则员工无正当理由拒绝可能违反合同约定。但需注意，此类条款不得违反法律强制性规定（如超时加班限制）。
企业生产经营的实际需求：在紧急生产任务、突发事件处理等特殊情况下，企业有权要求员工临时加班。此时员工应配合，但企业需提供合理补偿或调休安排。
员工的个人情况：员工因健康原因无法加班需提供医疗证明；家庭紧急情况需提供相应证据。若员工无正当理由长期拒绝合理加班要求，可能被视为违反规章制度。
合法辞退的条件
需满足《劳动合同法》第三十九条或第四十条规定的情形，例如严重违反规章制度、不胜任工作等。单纯以“不加班”为由辞退通常不成立。若公司违法解除合同，根据《劳动合同法》第八十七条，需支付双倍经济补偿金（即每工作满一年赔偿两个月工资）。
特殊情况
在发生自然灾害等需紧急处理的情况下，如果员工拒绝加班，公司解除合同可能有一定合理性。但这种情况较为特殊，且需结合具体情境和法律规定来判断。
建议措施
企业层面：应完善加班管理制度，明确加班审批流程、补偿标准及例外情形，并通过民主程序制定规章制度，确保内容合法且已向员工公示。
员工层面：应保留加班通知、沟通记录等证据，必要时可通过劳动仲裁维护自己的权益。如果因健康等原因无法加班，应及时提交医疗证明并与企业协商解决方案。
综上所述，厂里不能仅因为你不加班就辞退你。如果遇到这种情况，你可以依法维护自己的权益。如果你还有其他问题或需要进一步的法律帮助，请随时向我咨询。