结论：公司以不加班为由让你离职，这种做法是否合法需分情况讨论，一般情况下公司不能仅因员工拒绝加班就解除劳动合同，否则可能构成违法解除，需承担相应法律责任；但若存在特殊情形，公司的做法可能有一定合理性。以下为你详细分析：
一般情况下公司不能因拒绝加班解除劳动合同
- 法律依据
根据《劳动法》第四十一条规定，用人单位由于生产经营需要，经与工会和劳动者协商后可以延长工作时间，一般每日不得超过一小时；因特殊原因需要延长工作时间的，在保障劳动者身体健康的条件下延长工作时间每日不得超过三小时，但是每月不得超过三十六小时。这表明加班需要与劳动者协商一致，劳动者有权拒绝不合理的加班要求。
同时，《劳动合同法》第三十九条规定，用人单位解除劳动合同需要有法定事由，如劳动者严重违反用人单位的规章制度、严重失职给用人单位造成重大损害等。而拒绝加班并不属于这些法定解除事由。
- 法律后果
如果公司仅以员工拒绝加班为由解除劳动合同，那么公司的行为可能构成违法解除。根据《劳动合同法》第四十八条规定，用人单位违反本法规定解除或者终止劳动合同，劳动者要求继续履行劳动合同的，用人单位应当继续履行；劳动者不要求继续履行劳动合同或者劳动合同已经不能继续履行的，用人单位应当依照本法第八十七条规定支付赔偿金。赔偿金的标准是按照经济补偿标准的二倍向劳动者支付，经济补偿按劳动者在本单位工作的年限，每满一年支付一个月工资的标准向劳动者支付。六个月以上不满一年的，按一年计算；不满六个月的，向劳动者支付半个月工资的经济补偿。
举例：小李在某公司工作了两年，月工资为5000元。公司因业务繁忙要求小李加班，小李拒绝后公司将其辞退。小李不要求继续履行劳动合同，那么公司应支付给小李的赔偿金为：\(5000×2×2 = 20000\)元。
特殊情况下公司可能有一定合理性
- 存在紧急情况
在某些紧急情况下，如自然灾害、事故或者因抢险救灾等需要紧急处理的情况，用人单位可以不经过与劳动者协商，直接安排劳动者加班。如果劳动者在这种情况下拒绝加班，可能会给用人单位造成重大损失或者影响公共利益。此时，用人单位以劳动者拒绝加班为由解除劳动合同，可能有一定的合理性，但也需要符合一定的程序和条件。不过，这种情况非常特殊，适用范围很窄。
- 规章制度有明确规定且合法合理
如果公司的规章制度中明确规定了在某些特定情况下员工必须加班，并且该规章制度是经过民主程序制定、内容合法合理且已经向劳动者公示的，那么员工拒绝加班可能构成违反公司规章制度。在这种情况下，公司以员工严重违反规章制度为由解除劳动合同，可能有一定的法律依据。但公司需要证明该规章制度的内容不违反法律法规的强制性规定，且员工确实存在违反规章制度的行为。
举例：某公司是一家生产医疗物资的企业，在疫情期间，公司制定了规章制度，规定在接到政府紧急订单时，员工必须加班完成生产任务。该规章制度经过了职工代表大会讨论通过，并向全体员工进行了公示。小张是该公司员工，在公司接到紧急订单要求加班时拒绝加班，公司依据规章制度将其辞退。如果公司能够证明该订单确实属于紧急情况，且小张的行为给公司造成了重大损失，那么公司的做法可能有一定的合理性。
建议：如果你遇到公司以不加班为由让你离职的情况，首先可以与公司进行协商，要求公司说明解除劳动合同的理由和依据。如果协商不成，你可以向当地劳动监察部门投诉，或者向劳动争议仲裁委员会申请仲裁，维护自己的合法权益。如果你还有其他疑问或需要进一步的法律帮助，可以直接向我咨询。