结论：是否需要承担责任，取决于具体情形，包括对方摔倒的原因、你的行为是否具有过错以及过错程度等。以下分情况详细说明：
若你的行为无过错，对方因自身原因摔倒
- 法律解释：根据一般侵权责任的构成要件，需存在过错行为、损害结果、过错行为与损害结果之间的因果关系。若你只是正常拽衣服，没有故意或过失导致对方摔倒，且对方摔倒完全是由于自身平衡能力差、地面湿滑等自身原因造成，那么你不构成侵权，无需承担责任。
- 举例：比如，在正常的交流过程中，你轻轻拽了一下对方的衣服提醒其注意，对方却因自己没站稳而摔倒，这种情况下你无需负责。
若你的行为存在过错，且该过错与对方摔倒有因果关系
- 法律解释：如果你拽衣服的行为存在故意或过失，比如用力过猛、在对方处于危险位置（如楼梯口）时拽衣服等，且这种行为直接导致了对方摔倒，那么你可能需要承担相应的侵权责任。根据《中华人民共和国民法典》第一千一百六十五条：“行为人因过错侵害他人民事权益造成损害的，应当承担侵权责任。”
- 举例：你在楼梯口故意用力拽对方衣服，导致对方失去平衡摔倒受伤，此时你就需要为对方的损害承担赔偿责任。
- 责任程度：责任的大小会根据过错程度来确定。如果只是轻微过失，可能承担较小的责任；如果是故意或重大过失，则可能需要承担较大的责任，甚至全部责任。
若存在混合过错的情况
- 法律解释：混合过错是指对于损害的发生，加害人和受害人均有过错。在这种情况下，会根据双方的过错程度来分担责任。比如，你拽衣服的行为有一定过错，但对方也存在疏忽大意（如没有注意脚下情况）等过错，那么双方都需要按照各自的过错程度承担相应的责任。
- 举例：你在平地上稍微用力拽了一下对方衣服，对方在被你拽衣服时没有注意脚下有一个小坑，导致摔倒受伤。此时，你和对方都存在过错，责任会根据双方的过错程度进行分担。
建议：
- 在处理此类事件时，首先保持冷静，不要与对方发生争执或冲突。
- 如果对方受伤，应及时协助其就医，并保留好相关的医疗记录等证据。
- 如果对方要求赔偿，你可以先与对方协商，看是否能够达成和解。如果协商不成，可以寻求法律途径解决，比如通过调解、诉讼等方式。在此过程中，建议你收集并保留好相关证据，如现场照片、视频、证人证言等，以证明自己的行为与对方摔倒之间不存在因果关系或自己的过错程度较小。
后续思考依据：在判断是否需要承担责任时，关键在于分析行为与损害结果之间的因果关系以及行为人的过错程度。因此，在处理类似事件时，要特别注意收集和保留相关证据，以便在需要时能够证明自己的清白或减轻自己的责任。如果你还有其他疑问或需要进一步的法律帮助，可以直接向我咨询。