结论：您所描述的工作时间安排是否违法，需结合具体法律规定及实际情况判断，但从您提供的信息来看，该工作时间安排很可能违反了劳动法关于工作时间和休息休假的规定。
分析：
工作时间规定：
- 根据《中华人民共和国劳动法》第三十六条，国家实行劳动者每日工作时间不超过八小时、平均每周工作时间不超过四十四小时的工时制度。
- 您提到的工作时间是从早5点40分开班会，中午吃饭20分钟，到晚7点停工，这明显超过了每日八小时的工作时间标准。即使将班会时间排除在外，从正式工作开始到停工的时间也远超八小时。
休息休假规定：
- 劳动法还规定了劳动者享有休息休假的权利，包括每日的休息时间和每周的休息日。
- 在您描述的工作安排中，中午仅20分钟的吃饭时间显然不足以构成合理的休息时间，且未提及每周的休息日安排，这也可能违反了劳动法的规定。
加班与加班费：
- 如果因工作需要，用人单位安排劳动者加班，应依法支付加班费。
- 在您的情况下，如果工作时间确实超过了法定标准，且用人单位未支付加班费，那么用人单位的行为就构成了违法。
特殊工时制度：
- 需要注意的是，某些特殊行业或岗位可能实行不定时工作制或综合计算工时工作制，这些制度需要经过劳动行政部门的批准。
- 但即使实行这些特殊工时制度，也应保证劳动者的休息休假权利，且平均每日和每周的工作时间仍应符合劳动法的规定。
建议：
- 与用人单位沟通：首先，您可以与用人单位沟通，了解他们的工作时间安排是否合法，并表达您的关切和诉求。
- 收集证据：如果沟通无果，您可以开始收集相关证据，如工作记录、考勤表等，以证明您的工作时间超过了法定标准。
- 向劳动监察部门投诉：您还可以向当地的劳动监察部门投诉，请求他们介入调查并处理用人单位的违法行为。
- 寻求法律援助：如果必要，您可以寻求法律援助或咨询专业律师，以了解您的法律权益和可能的维权途径。
可能后果：
- 如果用人单位确实违反了劳动法的规定，他们可能会面临劳动行政部门的处罚，包括罚款、责令改正等。
- 您作为劳动者，也有权要求用人单位支付加班费、经济补偿等，并可能通过法律途径维护自己的合法权益。
总结：从您提供的信息来看，您所描述的工作时间安排很可能违反了劳动法的规定。我建议您与用人单位沟通、收集证据、向劳动监察部门投诉或寻求法律援助，以维护自己的合法权益。如果您有任何进一步的法律问题或需要更详细的法律建议，请直接向我咨询。