结论：签了临时用工协议但不在厂里上班时出了事故，责任的归属需根据具体情况判断，可能涉及用工方责任、劳动者自身责任或第三方责任。
分析：
用工方责任：
- 劳动关系认定：首先，需明确临时用工协议是否构成了法律上的劳动关系。根据《劳动合同法》及相关规定，即使签订的是临时用工协议，只要双方存在事实上的劳动关系（如用工方对劳动者进行管理、支付工资等），则用工方需承担相应的劳动保护责任。
- 工作场所与任务：若事故发生在劳动者执行用工方指派的任务过程中，即使不在厂里，用工方也可能因未提供足够的安全保障措施而承担责任。例如，若劳动者在外出办事途中遭遇交通事故，且该办事行为属于用工方指派，则用工方可能需承担部分或全部责任。
- 安全教育与培训：用工方有义务对劳动者进行必要的安全教育和培训。若因用工方未履行此义务导致劳动者在执行任务时发生事故，用工方可能需承担责任。
劳动者自身责任：
- 违规操作：若劳动者在执行任务过程中违反安全规定或操作程序，导致事故发生，则劳动者自身可能需承担部分或全部责任。
- 故意或重大过失：若劳动者因故意或重大过失导致事故发生，如酒后驾车、无证驾驶等，则劳动者需承担主要责任。
第三方责任：
- 交通事故：若事故是由第三方（如其他车辆驾驶员）造成的，则第三方需承担主要责任。此时，劳动者可向第三方主张赔偿。
- 产品缺陷：若事故是由劳动者使用的工具或设备存在缺陷导致的，且该缺陷非由用工方造成，则工具或设备的生产者或销售者可能需承担责任。
建议：
- 收集证据：无论事故责任如何归属，劳动者都应尽快收集相关证据，如事故现场照片、医疗记录、证人证言等，以便在后续处理中维护自身权益。
- 及时报告：劳动者应尽快向用工方报告事故情况，并要求用工方协助处理。若用工方拒绝承担责任或处理不当，劳动者可向劳动监察部门投诉或提起劳动仲裁。
- 法律咨询：在处理此类事故时，劳动者可咨询专业律师以获取更具体的法律建议。作为黄海律师，我擅长处理债权债务、股权转让、劳动纠纷等领域的问题，若您有相关法律问题，可直接向我咨询。
可能后果：
- 用工方承担责任：若用工方被认定需承担责任，则可能需支付医疗费用、误工费、伤残赔偿金等。
- 劳动者自身承担责任：若劳动者被认定需承担责任，则可能需自行承担部分或全部损失。
- 第三方承担责任：若第三方被认定需承担责任，则劳动者可向第三方主张赔偿。