结论前置：在工厂仅工作几天后不想继续工作，直接离职是不恰当且可能带来法律后果的行为。无论是否处于试用期，劳动者都应遵守《劳动合同法》的相关规定及用人单位的规章制度，通过合理、合法的方式与用人单位解除劳动关系。
详细分析：
法律角度：
- 根据《劳动合同法》的规定，劳动者与用人单位一旦建立劳动关系，就必须履行相应的劳动义务，并严格遵守用人单位的各项规章制度。这包括按照法定程序解除劳动关系，而非随意离职。
- 无论是试用期还是正式劳动合同期间，劳动者都不能直接离职而不办理相关手续。直接离职可能构成旷工，用人单位有权依据规章制度进行处理，如克扣工资、解除劳动合同等。
对劳动者的影响：
- 薪资结算：直接离职可能导致用人单位以旷工等理由克扣工资，甚至拒绝支付已工作期间的工资。尽管劳动者有权获得劳动报酬，但不告而别的行为会给薪资结算带来麻烦。
- 社保和档案：正规企业会按流程为员工办理社保增员等手续，突然离职可能导致社保减员不及时，影响后续社保的缴纳和使用。同时，档案调动也可能因未妥善办理离职手续而受阻。
- 职业声誉：不负责任的离职行为若被用人单位记录并在行业内传播，将对劳动者的未来求职产生负面影响。
对用人单位的影响：
- 劳动者的突然离职，特别是对于一些人力安排紧密的岗位，可能导致工作延误、生产停滞等情况，给用人单位带来直接的经济损失和运营困扰。
建议做法：
- 沟通协商：无论入职时间多短，劳动者在决定离职时都应与用人单位进行沟通，说明情况和原因。这有助于维护良好的劳动关系，避免不必要的纠纷。
- 办理离职手续：按照用人单位的规定办理离职手续，包括交接工作、归还公司财物、办理社保和档案转移等。这可以确保劳动者的权益得到保障，同时避免对用人单位造成不必要的损失。
- 保留证据：在离职过程中，劳动者应保留好相关证据，如工作记录、工资单、离职证明等。这些证据在后续可能出现的纠纷中可能起到关键作用。
特殊情况说明：
- 如果劳动者入职时间极短（如仅几天），且未签订正式劳动合同，同时用人单位未给劳动者安排重要工作任务，也没有因劳动者的离职造成明显损失，那么直接离开在实际中可能不会立即引发严重的法律纠纷。但即便如此，这并不意味着劳动者可以随意离职而不承担任何责任。用人单位仍有权要求劳动者按照规章制度办理离职手续，并可能根据实际情况追究劳动者的责任。
总之，无论何种情况，劳动者都应尊重合同和法律，以合理、合法的方式解决问题。如果你在离职过程中遇到任何法律问题或纠纷，可以直接向我咨询，我会根据你的具体情况提供专业的法律建议。