结论：没有碰到人但他自己摔伤，您是否有责任需根据具体情况判断，主要看您是否存在过错行为且该行为与摔伤之间是否存在因果关系。以下从不同角度为您详细分析：

一、一般情况：无直接身体接触且无过错，无责任

在大多数日常场景中，如果双方没有发生直接的身体接触，且您不存在任何过错行为（例如，您没有突然冲撞、推搡对方，没有在对方行走路径上设置障碍物，没有做出其他可能干扰对方正常行动的行为），那么对方自己摔伤，您通常不需要承担责任。因为侵权责任的构成一般需要满足四个要件：行为的违法性、损害事实的存在、违法行为与损害事实之间的因果关系以及行为人的过错。在此情况下，您没有违法行为，也不存在过错，与对方摔伤之间没有因果关系，所以不构成侵权，无需担责。

二、特殊情况：存在过错行为且与摔伤有因果关系，需担责

1. 您存在过错行为：如果您存在一些过错行为，比如您在行走过程中突然改变方向且速度较快，导致对方为躲避您而不慎摔倒；或者您在公共场所乱扔物品，对方踩到后滑倒摔伤；又或者您在驾驶车辆时，虽然没有直接碰到行人，但您的危险驾驶行为（如突然急刹车、违规变道等）惊吓到行人，导致其摔倒受伤等。这些情况下，您的行为存在过错。
2. 过错行为与摔伤有因果关系：即您的过错行为是导致对方摔伤的直接或间接原因。例如前面提到的为躲避您突然改变方向而摔倒、踩到您乱扔的物品滑倒、因您危险驾驶行为受惊吓摔倒等，都表明您的行为与对方摔伤之间存在因果关系。在这种情况下，您可能需要承担相应的侵权责任，具体责任比例会根据您的过错程度、对方自身的过错情况等因素由法院综合判定。

三、对方自身存在重大过错，可减轻或免除您的责任

如果对方自身存在重大过错，比如对方在行走过程中玩手机、醉酒后走路不稳、故意挑衅您等，导致其自己摔伤，那么即使您存在一定的轻微过错，也可以根据对方的过错程度相应减轻或免除您的责任。例如，对方醉酒后走路摇摇晃晃，您只是正常行走，对方为躲避其他行人而撞到您后摔倒，此时对方自身过错较大，您可能无需承担责任或仅承担极小比例的责任。

建议：如果遇到此类情况，建议您保留好相关证据，如现场照片、视频、证人证言等，以便在需要时证明自己的清白或确定责任比例。如果您对责任认定存在疑问或与对方无法协商解决，可以直接向我咨询，我会根据具体情况为您提供专业的法律建议和帮助。