在工厂上班时被外面人误伤，责任归属需根据具体情况分析，主要涉及民事责任、行政责任及刑事责任三个方面。以下是对此问题的详细分析：
民事责任
一般侵权责任：
- 根据《中华人民共和国民法典》第一千一百六十五条，若外面的人因过错（如操作不当、违反安全规范）导致你受伤，其应承担侵权责任。赔偿范围通常涵盖医疗费、护理费、交通费、营养费、住院伙食补助费、误工费，以及残疾时的辅助器具费和残疾赔偿金等。
特殊情形下的责任承担：
- 如果误伤行为发生在工厂内，且工厂对外部人员进入未尽到安全管理义务（如未设置门禁、未进行安全检查等），工厂可能需承担一定的补充责任。
- 若误伤行为是由工厂雇佣的外部人员（如承包商、临时工等）在执行工作任务时造成的，根据《中华人民共和国民法典》第一千一百九十一条，用人单位（即工厂）应承担侵权责任。用人单位承担侵权责任后，可以向有故意或者重大过失的工作人员追偿。
免责事由：
- 若能证明误伤行为出于紧急避险或正当防卫，且未超必要限度，可免除或部分免除责任。
行政责任
- 若误伤行为违反了工厂安全管理规定或相关行政管理法规，误伤者可能会受到警告、罚款等行政处罚。同时，工厂若存在安全管理漏洞，也可能受到相关行政部门的处罚。
刑事责任（较少涉及）
- 在极端情况下，如果误伤行为造成你重伤或死亡，且符合《中华人民共和国刑法》中相关犯罪构成要件（如过失致人重伤罪、过失致人死亡罪等），误伤者可能面临刑事处罚。但这要求行为达到严重程度并符合刑法犯罪构成。
建议措施
及时报警并保留证据：
- 立即报警，让警方介入调查，并保留好所有与误伤事件相关的证据，如现场照片、视频、证人证言等。
与工厂及误伤者沟通：
- 与工厂管理层沟通，了解工厂对此事的态度和处理方式。同时，尝试与误伤者沟通，了解其意图和赔偿意愿。
寻求法律帮助：
- 如有需要，可直接向我咨询，以便更准确地了解自己的法律权益和应对策略。我将根据你的具体情况，为你提供详细的法律分析和建议。
总结来说，在工厂上班时被外面人误伤，责任归属需根据具体情况分析。若涉及民事赔偿，可根据《中华人民共和国民法典》的相关规定向误伤者或工厂主张权利；若涉及行政处罚或刑事责任，则需根据相关法律法规进行处理。在此过程中，保留好所有相关证据并寻求专业法律帮助至关重要。