在工厂上班时打扫卫生本身并不违法，但若因此导致工伤或其他法律问题，则需根据具体情况进行处罚或赔偿。以下是对此问题的详细分析：

一、打扫卫生行为的合法性

1. 正常工作安排：在工厂上班时，打扫卫生通常是员工正常工作职责的一部分，或者是工厂为了维护工作环境整洁而进行的合理安排。这种行为本身并不违反任何法律法规。

2. 安全规范：然而，如果打扫卫生的过程中违反了工厂的安全规范或操作程序，例如未佩戴安全防护装备、在危险区域进行清洁等，那么这种行为就可能构成违规，甚至可能导致工伤事故。

二、因打扫卫生导致的工伤问题

1. 工伤认定：如果员工在打扫卫生过程中因工作原因受到事故伤害，根据《工伤保险条例》的规定，这通常会被认定为工伤。员工有权享受工伤保险待遇，包括医疗费用、伤残津贴、一次性工伤医疗补助金等。

2. 雇主责任：工厂作为雇主，有责任为员工提供安全的工作环境，并采取必要的措施预防工伤事故的发生。如果工厂未能履行这一责任，导致员工在打扫卫生过程中受伤，工厂可能需要承担相应的法律责任，包括赔偿员工的损失。

三、可能的处罚或赔偿情况

1. 违规处罚：如果员工在打扫卫生过程中违反了工厂的安全规范或操作程序，但并未导致工伤事故，工厂可能会根据内部规章制度对员工进行处罚，如警告、罚款等。但这种处罚应当合理且合法，不能侵犯员工的合法权益。

2. 工伤赔偿：如果员工在打扫卫生过程中因工作原因受伤，且被认定为工伤，那么工厂需要按照《工伤保险条例》的规定支付相应的工伤保险待遇。如果工厂未为员工缴纳工伤保险费，那么工厂需要自行承担这些费用。

3. 民事赔偿：除了工伤保险待遇外，如果员工因工伤导致残疾或死亡，其家属还有权根据《民法典》的相关规定向工厂主张民事赔偿，包括残疾赔偿金、死亡赔偿金、被扶养人生活费等。

四、建议与措施

1. 加强安全教育：工厂应加强对员工的安全教育，提高员工的安全意识，确保员工在打扫卫生等日常工作中遵守安全规范。

2. 完善安全制度：工厂应完善内部的安全制度，明确打扫卫生等工作的安全要求和操作程序，为员工提供必要的安全防护装备。

3. 及时处理工伤事故：如果发生工伤事故，工厂应及时将员工送往医疗机构进行治疗，并按照规定向社会保险行政部门报告工伤事故情况，以便员工能够及时享受工伤保险待遇。

如有任何关于劳动工伤的法律问题或疑虑，请直接向我咨询。我将根据您的具体情况提供专业的法律建议和帮助。