结论：聚众斗殴的认定并不要求双方都达到三人以上，只要一方纠集三人或以上进行斗殴，并满足聚众性、故意性和斗殴行为等条件，就可能构成聚众斗殴罪。

详细分析：

1. 聚众性：

   • 聚众斗殴中的“聚众”指的是聚集多人进行斗殴。这里的多人，一般是指双方人数合计达到三人及以上，但重要的是，只要一方人数达到三人以上，无论另一方人数是否达到，都可能构成聚众斗殴罪。例如，一方纠集了五人，与另一方两人发生激烈殴斗，此情形下，纠集五人的这一方可构成聚众斗殴罪。

2. 故意性：

   • 参与聚众的人员必须具有斗殴的主观故意，即明知是为了与对方斗殴而聚集在一起。这是区分聚众斗殴与其他类型冲突（如正当防卫）的关键。如果一方有互殴的故意，并纠集三人以上，实施了针对对方多人或其中不特定一人的殴斗行为，而对方没有互殴故意的，对有互殴故意的一方仍可以认定为聚众斗殴。

3. 斗殴行为：

   • 斗殴表现为双方或多方以暴力互相攻击对方身体的行为，包括但不限于拳打脚踢、使用器械攻击等。同时，斗殴必须出于报复、争霸或其他不正当目的。如果是出于正当防卫目的而实施的反击行为，则不构成聚众斗殴。

4. 法律责任：

   • 在聚众斗殴中，一般是首要分子和积极参加者才会被认定为犯罪。首要分子是指在聚众斗殴中起组织、策划、指挥作用的人员；积极参加者则是积极参与斗殴行为或者在斗殴中起重要作用的人员。
   • 根据《中华人民共和国刑法》第二百九十二条，对于聚众斗殴的首要分子和其他积极参加者，将处以三年以下有期徒刑、拘役或者管制。若聚众斗殴具有多次、人数多、规模大、社会影响恶劣，或者在公共场所或交通要道聚众斗殴造成社会秩序严重混乱，或者持械聚众斗殴等情形，对首要分子和其他积极参加者，将处三年以上十年以下有期徒刑。

实际应用中的注意事项：

• 在司法实践中，对于聚众斗殴的认定需要综合多方面因素进行判断。例如，当双方均有互殴的故意，且斗殴时一方人数达到三人以上，而另一方不到三人时，对达三人以上的一方可以认定为聚众斗殴；对不到三人的一方，如果其有聚众行为，也可以聚众斗殴罪论处；如果没有聚众行为，则不以聚众斗殴罪论处。
• 聚众斗殴行为不仅破坏了社会秩序，还可能对参与者和社会造成严重的身体伤害和财产损失。因此，一旦涉及此类行为，应尽快寻求法律帮助，以减轻或避免法律责任。

建议：

• 如果你或你身边的人涉及聚众斗殴案件，建议尽快咨询专业律师，了解具体的法律责任和可能的辩护策略。
• 在日常生活中，应遵守法律法规，避免参与任何形式的聚众斗殴行为，共同维护社会的和谐与稳定。

如有任何法律疑问或需要进一步的法律帮助，请直接向我咨询。