结论：肇事方在不知情的情况下驶离现场，但随后被交警追回，一般不被直接认定为肇事逃逸。不过，这一判断需结合具体证据和情形，由交通管理部门综合判定。
详细分析：
主观意图的考量：
- 肇事逃逸的认定，主观意图是关键因素之一。如果肇事方确实不知道发生了交通事故，而驶离了现场，那么其主观上并不存在逃避法律追究的故意。例如，在轻微碰撞且碰撞声响较小的情况下，肇事方可能未能察觉事故发生，从而正常驾车离开。这种情况下，由于缺乏主观故意，通常不符合肇事逃逸的主观要件。
客观行为的判断：
- 肇事逃逸还包括逃离事故现场的行为。然而，这一行为本身并不足以构成肇事逃逸，必须结合主观故意来综合判断。如果肇事方在不知情的情况下离开，即便有逃离现场的行为，但由于缺乏主观故意，也不应被认定为肇事逃逸。
“知情”的认定：
- 是否“知情”并非由肇事方单方面陈述决定。在实际案件中，交通管理部门会综合考虑多种因素来判断肇事方是否确实不知情。这些因素包括但不限于事故发生时的具体情况、车辆损坏程度、现场人员的证言以及肇事方提供的证据等。如果肇事方能够提供充分证据证明自己在事故发生时确实不知情，那么其离开现场的行为通常不会被认定为肇事逃逸。
后续行为的考量：
- 即使肇事方在不知情的情况下离开了现场，也应尽快与警方取得联系，说明情况并配合调查。这不仅是肇事方的法律义务，也有助于澄清事实，避免不必要的误解和法律纠纷。如果肇事方在被交警追回后，积极配合调查，如实陈述事实，那么这一行为也有助于证明其并非故意逃逸。
特殊情形与法律后果：
- 如果肇事方在驶离现场后，因各种原因（如害怕承担责任、逃避法律追究等）而故意隐藏或销毁证据，或者在被交警追回后拒不配合调查、隐瞒事实等，那么这些行为可能会加重其法律责任，甚至被认定为肇事逃逸。
- 根据《中华人民共和国刑法》第一百三十三条的规定，交通运输肇事后逃逸或者有其他特别恶劣情节的，处三年以上七年以下有期徒刑。因此，如果肇事方被认定为肇事逃逸，将面临严重的法律后果。
建议：
- 对于肇事方而言，在发生交通事故后，应立即停车查看情况，并尽快与警方取得联系。如果确实不知道发生了事故而驶离了现场，也应在发现后尽快返回或报警说明情况。
- 在处理交通事故时，应积极配合警方的调查工作，如实陈述事实，提供必要的证据和信息。这有助于澄清事实，避免不必要的法律纠纷。
如有任何疑问或需要进一步的法律帮助，请随时向我咨询。