结论：是否需要赔钱取决于多个因素，包括你踢人的行为是否构成正当防卫、对方的伤势情况以及双方的责任划分等。以下从不同角度为你详细分析：
一、正当防卫的角度
正当防卫的构成要件：
- 存在不法侵害：在此情境中，别人骂你可能构成对你名誉权的侵害，但通常不视为直接的身体侵害。然而，若骂人的行为升级为推搡、殴打等身体侵害，则满足不法侵害的要件。
- 防卫行为适时：防卫行为必须在不法侵害正在进行时实施，不能在不法侵害开始前或结束后进行。
- 防卫行为适度：防卫行为必须针对不法侵害者本人实施，且防卫的手段和强度应当与不法侵害相适应，不能明显超过必要限度造成重大损害。
你的行为是否构成正当防卫：
- 如果别人只是骂你，并未实施身体侵害，你踢人的行为可能不构成正当防卫，而是属于互殴或报复行为。
- 如果别人在骂你的同时或之后实施了身体侵害，你踢人的行为可能是为了制止不法侵害而采取的防卫措施。但即便如此，也需要判断你的防卫行为是否适度，是否超过了必要限度。
二、对方伤势及责任划分的角度
对方伤势情况：
- 如果对方因你踢人的行为而受伤，且伤势较轻，可能只涉及民事赔偿问题。
- 如果对方伤势较重，可能构成轻伤或重伤，此时你可能面临刑事责任，同时还需要承担民事赔偿责任。
双方责任划分：
- 在侵权纠纷中，通常会根据双方的过错程度来划分责任。如果对方先骂你并引发冲突，对方可能存在一定的过错。但你的踢人行为如果超出必要限度或构成故意伤害，你也需要承担相应的责任。
- 具体责任划分需要由法院或相关机构根据事实情况和法律规定进行判断。
三、法律建议
保留证据：
- 如果可能的话，尽量保留与冲突相关的证据，如现场照片、视频、证人证言等。这些证据有助于证明你的行为是否构成正当防卫以及双方的责任划分。
及时报警：
- 如果冲突升级或对方受伤较重，建议及时报警并寻求警方的帮助。警方会进行调查并出具相关报告，这有助于后续的法律程序。
咨询专业律师：
- 在处理此类纠纷时，建议咨询专业律师以获取更具体的法律建议。律师可以根据你的具体情况和当地法律规定为你提供针对性的指导。
进一步思考：在面对冲突时，保持冷静和理智至关重要。尽量避免使用暴力手段解决问题，以免引发不必要的法律纠纷和后果。如果遇到类似情况，建议先尝试通过沟通、协商等方式解决问题；如果无法解决，再考虑寻求法律途径维护自己的权益。如果你还有其他疑问或需要进一步的法律帮助，请随时向我咨询。