结论：小工厂没跟员工签合同，要员工走人是否需要赔钱，这主要取决于员工的工作年限以及工厂解除劳动关系的合法性。一般来说，如果工厂违法解除劳动关系，且未与员工签订书面劳动合同，那么工厂很可能需要支付经济补偿金及未签合同的双倍工资差额。
分析说明：
未签劳动合同的法律后果：
- 根据《中华人民共和国劳动合同法》的相关规定，用人单位自用工之日起超过一个月不满一年未与劳动者订立书面劳动合同的，应当向劳动者每月支付二倍的工资。这意味着，如果小工厂未与员工签订书面劳动合同，员工有权要求工厂支付未签合同期间的双倍工资差额。
解除劳动关系的经济补偿：
- 如果工厂要员工走人，即解除劳动关系，那么需要根据解除劳动关系的合法性来判断是否需要支付经济补偿金。
- 如果工厂违法解除劳动关系（如无合法理由、未提前通知等），员工有权要求工厂支付经济补偿金，经济补偿金的标准通常按照员工在工厂的工作年限，每满一年支付一个月工资的标准向员工支付。六个月以上不满一年的，按一年计算；不满六个月的，向员工支付半个月工资的经济补偿。
- 如果工厂合法解除劳动关系（如员工严重违反工厂规章制度、不能胜任工作等），且已提前通知员工，那么工厂可能不需要支付经济补偿金。但在此情况下，工厂仍需支付员工应得的工资及未签合同的双倍工资差额（如果适用）。
综合判断：
- 在小工厂未与员工签订书面劳动合同的情况下，如果工厂要员工走人且解除劳动关系的行为违法，那么工厂很可能需要同时支付未签合同的双倍工资差额及经济补偿金。
- 如果工厂合法解除劳动关系，但仍需支付未签合同的双倍工资差额（如果员工在工厂工作超过一个月且未满一年）。
行动建议：
- 对于员工：如果小工厂未与你签订书面劳动合同且要你走人，你可以先与工厂协商，要求支付未签合同的双倍工资差额及经济补偿金（如果适用）。如果协商不成，你可以向当地劳动监察部门投诉或申请劳动仲裁，以维护自己的合法权益。
- 对于工厂：为了避免法律风险，小工厂应尽快与员工签订书面劳动合同，并确保解除劳动关系的合法性。如果确实需要解除劳动关系，应提前与员工沟通并支付应得的经济补偿金（如果适用）。
特殊场景：
- 如果员工在小工厂工作不满一个月，且工厂未与其签订书面劳动合同，那么员工可能无法要求工厂支付未签合同的双倍工资差额。但在此情况下，如果工厂要员工走人且解除劳动关系的行为违法（如无合法理由、未提前通知等），员工仍有权要求工厂支付相应的经济补偿（虽然可能较少）。
相关法规：
- 《中华人民共和国劳动合同法》第八十二条：用人单位自用工之日起超过一个月不满一年未与劳动者订立书面劳动合同的，应当向劳动者每月支付二倍的工资。
- 《中华人民共和国劳动合同法》第四十七条：经济补偿按劳动者在本单位工作的年限，每满一年支付一个月工资的标准向劳动者支付。六个月以上不满一年的，按一年计算；不满六个月的，向劳动者支付半个月工资的经济补偿。
如有更多疑问或需要进一步的法律帮助，请直接向我咨询。