撤掉班长当班员，一般不可以直接作为被迫离职的理由。以下从不同角度为你详细分析：
从劳动合同变更的角度
劳动合同是劳动者与用人单位确立劳动关系、明确双方权利和义务的协议。用人单位调整劳动者的工作岗位，属于对劳动合同内容的变更。根据《中华人民共和国劳动合同法》的相关规定，变更劳动合同应当遵循平等自愿、协商一致的原则，并且应当采用书面形式。
- 若用人单位未经协商一致单方面调整岗位：如果用人单位仅仅因为撤掉你的班长职务，就单方面将你调整为班员，且这种调整并非基于生产经营的合理需要，也没有与你进行充分的协商，那么这种岗位调整可能违反了劳动合同的约定和法律规定。然而，这并不意味着你可以直接以此为由被迫离职。在这种情况下，你可以先与用人单位进行沟通协商，要求恢复原岗位或者就新的岗位安排达成一致。如果协商无果，你可以向劳动监察部门投诉或者申请劳动仲裁，要求用人单位承担相应的法律责任，如继续履行原劳动合同、支付违法解除劳动合同的赔偿金（如果用人单位因此解除了你的劳动合同）等，而不是直接选择被迫离职。
- 若用人单位经协商一致调整岗位：如果用人单位与你就岗位调整进行了充分的协商，并且你同意了从班长调整为班员，那么这种岗位调整是合法的。在这种情况下，你不能再以岗位调整为由主张被迫离职。
从被迫离职的法定情形角度
根据《中华人民共和国劳动合同法》第三十八条的规定，劳动者被迫离职的法定情形主要包括以下几种：
- 未按照劳动合同约定提供劳动保护或者劳动条件的：如果用人单位没有为你提供必要的劳动保护措施或者劳动条件，如安全的工作环境、必要的劳动工具等，你可以以此为由被迫离职。但撤掉班长当班员，并不直接等同于未提供劳动保护或者劳动条件。
- 未及时足额支付劳动报酬的：如果用人单位拖欠你的工资或者未按照约定支付加班费等，你可以以此为由被迫离职。这与岗位调整没有直接关系。
- 未依法为劳动者缴纳社会保险费的：如果用人单位没有为你缴纳社会保险费，你可以以此为由被迫离职。这同样与岗位调整无关。
- 用人单位的规章制度违反法律、法规的规定，损害劳动者权益的：如果用人单位的规章制度违反了法律、法规的规定，并且损害了你的权益，你可以以此为由被迫离职。但撤掉班长当班员，并不直接表明用人单位的规章制度违法。
- 因本法第二十六条第一款规定的情形致使劳动合同无效的：如果用人单位以欺诈、胁迫的手段或者乘人之危，使你在违背真实意思的情况下订立或者变更劳动合同，导致劳动合同无效，你可以以此为由被迫离职。这与岗位调整的合法性没有直接联系。
- 法律、行政法规规定劳动者可以解除劳动合同的其他情形：除了上述情形外，如果法律、行政法规还规定了其他劳动者可以解除劳动合同的情形，你也可以以此为由被迫离职。但撤掉班长当班员，并不直接构成这些法定情形之一。
建议
- 与用人单位沟通协商：如果你对岗位调整有异议，可以先与用人单位进行沟通协商，表达你的想法和诉求，尝试达成一致意见。
- 保留相关证据：在与用人单位沟通协商的过程中，要注意保留好相关证据，如书面通知、聊天记录、录音录像等，以备不时之需。
- 寻求法律援助：如果协商无果，你可以向当地的劳动监察部门投诉或者申请劳动仲裁，寻求法律援助来维护自己的合法权益。
总之，撤掉班长当班员并不能直接作为被迫离职的理由。在面对这种情况时，你要保持冷静和理性，通过合法途径来维护自己的权益。如果你还有其他疑问或需要进一步的法律帮助，可以直接向我咨询。