结论：星期六、星期天不去工厂上班是否算旷工，需根据劳动合同、公司规章制度以及相关法律法规来综合判断。若这两天是法定或约定的休息日，则不上班不构成旷工；若这两天被安排为工作日且员工未履行工作职责，则可能被视为旷工。
详细分析：
法律法规基础：
- 根据《中华人民共和国劳动法》第三十六条，国家实行劳动者每日工作时间不超过八小时、平均每周工作时间不超过四十四小时的工时制度。这意味着，除非有特殊情况，否则劳动者每周应有一定的休息时间。
- 同样，根据《中华人民共和国劳动法》第三十八条，用人单位应当保证劳动者每周至少休息一日。这进一步明确了劳动者每周至少应有一天休息日。
劳动合同与规章制度：
- 劳动合同是劳动者与用人单位之间约定权利义务的重要文件。如果劳动合同中明确约定了星期六、星期天为休息日，那么劳动者在这两天不上班，自然不构成旷工。
- 公司规章制度也是判断是否旷工的重要依据。如果公司规章制度中明确规定了星期六、星期天为休息日，或者虽然未明确规定但实际执行中一直将这两天视为休息日，那么劳动者在这两天不上班，也不应被视为旷工。
- 然而，如果劳动合同或公司规章制度中明确规定了星期六、星期天为工作日，或者因生产经营需要临时安排劳动者在这两天上班，并且这种安排符合法律法规（如给予调休或支付加班工资），那么劳动者无正当理由不上班，就可能会被认定为旷工。
特殊情况处理：
- 如果劳动者因突发疾病、不可抗力等无法抗拒的原因无法在星期六、星期天到岗工作，并且有正当理由和相应证明，那么这种情况一般不被视为旷工。
- 另外，如果用人单位未经劳动者同意，擅自将星期六、星期天安排为工作日，并且未给予相应的调休或加班工资，那么劳动者有权拒绝在这两天上班，并且这种情况也不应被视为旷工。
建议与行动：
- 了解合同与制度：劳动者应仔细阅读自己的劳动合同和公司规章制度，了解其中关于工作时间和休息日的规定。
- 沟通协商：如果劳动者对星期六、星期天是否上班有疑问或异议，应与用人单位进行沟通协商，明确双方的权利义务。
- 维护权益：如果劳动者认为用人单位的行为违反了法律法规或劳动合同的规定，侵害了自己的合法权益，可以向劳动监察部门投诉或申请劳动仲裁来维护自己的权益。
总之，星期六、星期天不去工厂上班是否算旷工，并不是一个简单的“是”或“否”的问题，而是需要根据具体情况和多个法律知识点来综合判断。劳动者应了解自己的权利和义务，并根据相关法律法规和单位规定来做出合理的选择。如果有任何疑问或需要进一步的法律帮助，可以直接向我咨询。