工厂不可以随时辞退小时工。以下从不同角度为你详细分析：

法律层面

根据《劳动合同法》等相关法律法规，无论是全日制员工还是非全日制员工（小时工通常属于非全日制用工范畴），用人单位都无权随意辞退。对于非全日制用工，虽然其用工形式相对灵活，但用人单位解除劳动关系仍需遵循一定的法定条件和程序。

• 非全日制用工的解除条件：如果小时工存在严重违反用人单位规章制度、严重失职给用人单位造成重大损害、被依法追究刑事责任等法定情形，用人单位可以解除劳动合同，且无需支付经济补偿。但这些情形的认定需要用人单位提供充分的证据予以证明。
• 非全日制用工的解除程序：即使小时工存在上述可解除劳动合同的情形，用人单位也应当按照法定程序进行操作，如通知工会（如有）、告知劳动者解除理由等。如果用人单位未遵循法定程序，可能构成违法解除，需要承担相应的法律责任。

实际案例角度

假设某工厂以“业务调整”为由，未经任何程序直接辞退了一名小时工。该小时工认为工厂的行为违法，遂向劳动仲裁机构申请仲裁。在仲裁过程中，工厂无法提供充分证据证明其辞退行为符合法定条件或程序。最终，劳动仲裁机构裁决工厂构成违法解除，需要向小时工支付赔偿金。

工厂可能面临的法律后果

如果工厂随意辞退小时工，可能面临以下法律后果：

• 支付赔偿金：如上述案例所示，如果工厂的行为被认定为违法解除，需要向小时工支付赔偿金。赔偿金的计算标准通常为劳动者在用人单位的工作年限乘以月工资的两倍（对于非全日制用工，月工资的计算可能有所不同，但原理相似）。
• 恢复劳动关系：在某些情况下，如果小时工要求继续履行劳动合同，且劳动合同具有继续履行的可能性，劳动仲裁机构或法院可能会裁决恢复劳动关系。
• 其他行政处罚：如果工厂的行为违反了劳动保障法律法规的其他规定，还可能面临劳动保障行政部门的行政处罚，如罚款、责令改正等。

建议

• 对工厂而言：在辞退小时工时，务必确保符合法定条件和程序，避免违法解除带来的法律风险。如果确实需要辞退，建议与小时工进行充分沟通，并按照法定程序办理相关手续。
• 对小时工而言：如果遭遇工厂随意辞退的情况，可以保留相关证据（如工作证、工资条、辞退通知等），并向劳动仲裁机构申请仲裁以维护自己的合法权益。

如果你有进一步的疑问或需要具体的法律帮助，可以直接向我咨询。