结论：被人打了之后自己又打回去，是否需要赔钱取决于具体情况，包括双方的行为性质、损害后果以及是否存在正当防卫等法定免责事由。

1. 如果双方行为均构成违法或犯罪：

• 在这种情况下，双方都可能因自己的行为而承担法律责任。如果先动手的一方（甲方）对后动手的一方（乙方）造成了伤害，甲方需要承担侵权责任，赔偿乙方的医疗费、误工费等损失。
• 同时，如果乙方在被打后反击，且反击行为超出了必要的防卫限度，造成了甲方不必要的伤害，那么乙方也可能需要承担相应的法律责任，包括赔偿甲方的损失。这种情况下，双方可能都需要根据各自的过错程度来承担赔偿责任。

2. 如果后动手的一方构成正当防卫：

• 根据《中华人民共和国刑法》第二十条的规定，为了使国家、公共利益、本人或者他人的人身、财产和其他权利免受正在进行的不法侵害，而采取的制止不法侵害的行为，对不法侵害人造成损害的，属于正当防卫，不负刑事责任。
• 在民事赔偿方面，如果乙方的反击行为被认定为正当防卫，那么乙方通常不需要承担赔偿责任。因为正当防卫是法律赋予公民的一种自我保护权利，当公民面临正在进行的不法侵害时，有权采取必要的防卫措施来保护自己或他人的合法权益。

3. 特殊情况下的责任承担：

• 如果双方的行为都较为轻微，没有造成严重的损害后果，那么可能不会涉及刑事责任，但民事赔偿问题仍然可能存在。在这种情况下，双方可以通过协商、调解等方式来解决赔偿问题。
• 另外，如果乙方在反击过程中使用了过度的暴力或武器，导致甲方受到严重伤害，那么乙方的行为可能不再被视为正当防卫，而是构成故意伤害等犯罪行为，需要承担相应的刑事责任和民事赔偿责任。

建议：

• 在面临不法侵害时，应尽量保持冷静，避免使用暴力进行反击。如果可能的话，应尽快报警或寻求其他合法途径来解决问题。
• 如果已经发生了打斗事件，并且双方都有受伤，那么应尽快就医并保留好相关证据（如医疗记录、现场照片等），以便后续处理赔偿问题。
• 在处理此类纠纷时，建议咨询专业律师的意见，以便更好地了解自己的权利和义务，并维护自己的合法权益。

法律后果：

• 如果双方的行为都构成违法或犯罪，那么双方都可能面临刑事处罚和民事赔偿的责任。
• 如果一方的行为构成正当防卫，那么该方通常不需要承担赔偿责任，但另一方仍可能根据其过错程度承担相应的责任。

总之，被人打了之后自己又打回去是否需要赔钱，取决于具体情况和法律规定。在处理此类纠纷时，应保持冷静、理性，并寻求合法途径来解决问题。如果有任何疑问或需要进一步的法律帮助，请直接向我咨询。