核心结论：倒车时行人撞上来且未停留直接离开，您首先需确保自身行为合法合规，若担心后续纠纷，可主动收集证据；若行人后续主张赔偿，需根据具体情况判断责任承担。以下分情况详细说明：

1. 若您倒车行为合法合规

   • 责任认定：根据《道路交通安全法实施条例》第五十条，机动车倒车时，应当察明车后情况，确认安全后倒车。若您在倒车时已充分观察周围环境，按照交通规则正常操作，行人突然撞上来且未停留离开，这种情况下，您可能无需承担主要责任。因为行人作为交通参与者，也有注意周围交通状况的义务，若其未尽到该义务而撞上车辆，自身可能存在过错。例如，行人低头玩手机、横穿马路未走人行横道等行为导致与倒车车辆相撞。
   • 后续处理：若您担心行人后续可能会回来主张赔偿，您可以主动收集相关证据，如行车记录仪视频、现场照片等，以证明自己倒车行为合法合规，行人存在过错。若行人未造成您车辆损坏，一般情况下无需采取进一步行动；若造成车辆损坏，您可尝试通过警方联系行人，协商赔偿事宜，若协商不成，可凭借证据向法院提起诉讼，要求行人赔偿车辆维修费用等损失。

2. 若您倒车行为存在过错

   • 责任认定：如果您在倒车时没有察明车后情况，或者违反交通规则倒车，如在不允许倒车的地方倒车等，导致行人撞上来，那么您可能需要承担一定的责任。根据《道路交通安全法》第七十六条，机动车与非机动车驾驶人、行人之间发生交通事故，非机动车驾驶人、行人没有过错的，由机动车一方承担赔偿责任；有证据证明非机动车驾驶人、行人有过错的，根据过错程度适当减轻机动车一方的赔偿责任；机动车一方没有过错的，承担不超过百分之十的赔偿责任。所以，即使行人未停留离开，若您存在过错，仍可能需要根据过错程度承担相应的赔偿责任。
   • 后续处理：在这种情况下，您同样可以收集证据，如行车记录仪视频等，以证明行人也存在一定的过错，从而减轻自己的赔偿责任。若行人后续主张赔偿，您应积极与行人协商，根据双方过错程度确定赔偿金额。若协商不成，行人可能会向法院提起诉讼，您需凭借证据在诉讼中维护自己的合法权益。

3. 关于行人未停留直接离开的情况

   • 行人可能的情况：行人未停留直接离开可能有多种原因，比如行人自身受伤较轻，认为无需处理；或者行人意识到自己存在过错，担心承担责任而选择离开；也有可能是行人有其他紧急事情需要处理。
   • 您的应对措施：无论行人出于何种原因离开，您都应先确保自身安全，然后检查车辆是否受损。若车辆受损，可尝试记录现场情况，如拍照、寻找目击证人等。若您担心行人可能受伤严重，可向警方报案，说明情况，由警方进行调查处理。

如果您在处理此类事件过程中遇到任何法律问题，都可以直接向我咨询，我会为您提供详细、专业的解答。