结论：您描述的行为是否犯法，取决于具体情境和造成的后果，不能一概而论。以下从不同角度为您详细分析：

1. 正当防卫的角度：

   • 如果别人拉您衣服的行为，对您构成了现实、紧迫的危险，比如对方意图对您进行暴力攻击或者有其他不法侵害的意图，您为了保护自己的人身安全，打了他一拳，这有可能构成正当防卫。
   • 根据《中华人民共和国刑法》的相关规定，正当防卫不负刑事责任。但需要注意的是，正当防卫的限度要适当，不能明显超过必要限度造成重大损害。如果您的防卫行为超出了必要的限度，比如对方只是轻微拉扯，您却将其打成重伤，那么您可能需要承担相应的法律责任。

2. 故意伤害的角度：

   • 如果别人拉您衣服的行为，并未对您构成现实、紧迫的危险，或者您无法证明对方有侵害您的意图，您却出于报复、愤怒等情绪，主动打了他一拳，这有可能构成故意伤害。
   • 故意伤害他人身体的，根据伤害程度的不同，可能面临治安管理处罚或者刑事处罚。如果造成对方轻微伤，可能面临行政拘留和罚款；如果造成对方轻伤或以上，则可能构成故意伤害罪，需要承担刑事责任。

3. 民事赔偿的角度：

   • 无论您的行为是否构成犯罪，如果您的行为造成了对方的人身损害，您都可能需要承担民事赔偿责任。
   • 根据《中华人民共和国民法典》的相关规定，侵害他人造成人身损害的，应当赔偿医疗费、护理费、交通费、营养费、住院伙食补助费等为治疗和康复支出的合理费用，以及因误工减少的收入。

建议：

• 在遇到类似情况时，尽量保持冷静，避免使用暴力解决问题。
• 如果对方的行为确实对您构成了威胁或侵害，您可以尝试通过报警、寻求周围人帮助等方式来保护自己。
• 如果您的行为已经造成了对方的人身损害，建议您主动与对方协商赔偿事宜，或者寻求法律途径解决纠纷。

后续行动：

• 如果您对具体情况是否构成正当防卫、故意伤害或需要承担民事赔偿责任有疑问，建议您收集相关证据（如现场监控、证人证言等），并直接向我咨询，以便我能根据具体情况为您提供更准确的法律意见。