结论：别人打你后第二天你打回去，这一行为是否犯法不能一概而论，需要结合具体情况来判断。

分析如下：

1. 正当防卫的认定：

   • 正当防卫是指在受到不法侵害时，为了保护国家、公共利益、本人或他人的人身、财产和其他权利免受正在进行的不法侵害，而采取的制止不法侵害的行为。
   • 在你被打后的第二天，如果对方已经停止了不法侵害行为，且没有再次对你构成威胁，此时你打回去通常不被视为正当防卫，因为不法侵害已经结束，你的行为可能构成报复或故意伤害。

2. 报复行为的法律后果：

   • 如果你在对方停止侵害后，出于报复心理而打回去，这一行为可能构成故意伤害罪或寻衅滋事罪等，具体取决于伤害的严重程度和行为的性质。
   • 根据《中华人民共和国刑法》的相关规定，故意伤害他人身体的，处三年以下有期徒刑、拘役或者管制；致人重伤的，处三年以上十年以下有期徒刑；致人死亡或者以特别残忍手段致人重伤造成严重残疾的，处十年以上有期徒刑、无期徒刑或者死刑。

3. 特殊情况下的考量：

   • 如果在被打后的第二天，对方再次对你构成威胁或正在进行不法侵害，你为了保护自己而采取的防卫行为，可能仍然构成正当防卫。但这种情况需要严格的证据支持，以证明不法侵害的正在进行性和防卫的必要性。
   • 另外，如果双方存在互殴的情况，且难以区分谁先动手或谁的责任更大，那么双方都可能面临法律责任，具体取决于各自的伤害程度和行为的性质。

建议：

• 在遇到类似情况时，首先应保持冷静，尽量避免与对方发生肢体冲突。
• 如果受到不法侵害，应立即报警并寻求法律帮助，通过合法途径维护自己的权益。
• 不要采取报复行为，以免给自己带来不必要的法律麻烦和后果。

后续行动：

• 如果你已经遭遇了类似情况，并担心自己的法律责任，建议尽快向我咨询，提供详细的情况描述和相关证据，以便我能够为你提供更具体的法律建议和帮助。
• 同时，你也可以考虑收集相关证据，如现场照片、视频、证人证言等，以备不时之需。