结论：无接触对方摔倒后自己驶离，是否算逃逸不能一概而论，需根据具体情况判断。以下是详细分析：
一、不构成逃逸的情形
无直接因果关系且不知情：
- 如果你正常行驶，没有违反交通规则，且对方的摔倒完全是由于自身原因（如突然奔跑、自身疾病发作等）导致的，你们之间并没有发生直接的交通接触或碰撞，从严格意义上讲，这并不构成一起交通事故。
- 在这种情况下，如果你在事发时并不知晓对方摔倒，那么你离开现场通常不会被视为逃逸。因为逃逸的认定需要当事人明知事故发生而故意离开。
有正当理由离开并事后说明：
- 如果你在事发时虽然知道对方摔倒，但有正当理由需要离开现场（如突发紧急医疗状况、处理危及生命安全的重大事件等），并且在事后主动联系警方说明情况，这种情况下也不应被认定为逃逸。
- 关键在于你离开现场的原因是否合理，以及是否及时与警方取得联系并说明情况。
二、可能构成逃逸的情形
存在过错导致摔倒却逃离：
- 虽然没有直接撞到对方，但如果你的行为（如驾车突然变道、急刹车等）与对方摔倒有因果关系，即对方是为了躲避你而摔倒，那么你明知对方摔倒却未停车查看情况和进行必要救助，而是直接离开现场，这种行为很可能会被认定为交通肇事逃逸。
- 逃逸的认定不仅基于是否发生物理接触，更在于当事人是否明知事故发生而故意逃避法律责任。
推定有过错并逃离导致责任难定：
- 如果事发时没有监控等证据证明你对对方摔倒不存在过错，而你又擅自离开现场，导致事故责任难以认定，根据相关规定，可能会推定你承担事故的全部责任，并且认定你存在逃逸行为。
- 在这种情况下，即使你实际上没有过错，也可能因为逃离现场而承担不利的法律后果。
三、法律建议与后续行动
立即停车查看情况：
- 在遇到类似情况时，建议你保持冷静，立即停车查看情况。这是履行法定义务的第一步，也是避免被认定为逃逸的关键。
提供必要救助并报警：
- 如果对方受伤或需要帮助，你应在确保安全的前提下提供必要的救助，并迅速报警。报警后，应积极配合交警的调查工作，如实陈述事故经过。
保留证据以备后续：
- 在等待交警到场的过程中，你可以自行拍摄现场照片、视频等证据材料，以便后续处理。这些证据可能对于明确事故责任、证明你的清白至关重要。
如有特殊原因需离开，尽快与警方联系：
- 如果你确实有特殊原因需要离开现场（如紧急医疗状况等），也应尽快与警方联系并说明情况。这样可以避免不必要的法律纠纷和误解。
总结：无接触对方摔倒后自己驶离是否算逃逸，需根据具体情况判断。如果你对事故的发生并不知情或有正当理由离开现场，并及时与警方取得联系说明情况，那么通常不会被认定为逃逸。但如果你明知事故发生却故意离开现场以逃避法律责任，那么这种行为很可能构成交通肇事逃逸。因此，在遇到类似情况时，建议你保持冷静、立即停车查看情况、提供必要救助并报警，以维护自己的合法权益并避免不必要的法律纠纷。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。