结论是：在试用期被工厂人事通知离职，是否要走需视具体情况而定，不能一概而论。 以下是从不同角度进行的分析：
一、试用期离职的法律规定
根据《中华人民共和国劳动合同法》的相关规定，在试用期内，用人单位和劳动者都有权解除劳动合同，但解除的原因和程序需符合法律规定。
用人单位解除：
- 如果用人单位以“不符合录用条件”为由解除劳动合同，需满足以下条件：
- 用人单位有明确的录用条件；
- 录用条件已告知劳动者；
- 劳动者确实不符合录用条件；
- 解除决定在试用期内作出。
- 若用人单位无法证明劳动者不符合录用条件，或解除决定超出试用期，则可能构成违法解除，劳动者有权要求继续履行劳动合同或获得赔偿。
劳动者解除：
- 劳动者在试用期内提前三日通知用人单位，可以解除劳动合同。这是劳动者的权利，无需用人单位同意。
二、针对您的情况的分析
若工厂以“不符合录用条件”为由通知您离职：
- 您有权要求工厂出具具体的“不符合录用条件”的证明。
- 若工厂无法提供或证明不充分，您有权拒绝离职，并可考虑通过劳动仲裁维护自己的权益。
若工厂未明确说明离职原因，或原因不合法：
- 工厂的行为可能构成违法解除，您有权要求继续履行劳动合同或获得相应的经济赔偿。
- 经济赔偿的计算方式通常为：按照您在本单位工作的年限，每满一年支付一个月工资的标准向您支付。六个月以上不满一年的，按一年计算；不满六个月的，向您支付半个月工资的经济补偿。由于您处于试用期，具体赔偿金额可能需根据实际情况和当地规定确定。
若您自己考虑离职：
- 根据法律规定，您在试用期内有权提前三日通知工厂后离职。
- 但建议您在离职前与工厂协商好工资结算、社保转移等事宜，以避免后续纠纷。
三、建议与行动
与工厂沟通：
- 首先与工厂人事部门沟通，了解离职的具体原因和依据。
- 若工厂无法提供合法依据，或您认为工厂的行为不合法，可向工厂提出异议。
收集证据：
- 保留与工厂的沟通记录、劳动合同、录用条件等相关证据。
- 这些证据在后续的劳动仲裁或诉讼中可能起到关键作用。
寻求法律帮助：
- 若您与工厂无法达成一致，或认为自己的权益受到侵害，可考虑通过劳动仲裁或诉讼途径维护自己的权益。
- 在此过程中，如有需要，可直接向我咨询，我会根据您的具体情况提供专业的法律建议。
综上所述，是否要走需根据工厂通知您离职的具体原因和依据来判断。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。