结论：聚众斗殴罪中的“聚众”指的是斗殴双方中的任何一方纠集三人以上进行斗殴，只要一方人数达到三人以上，且符合聚众斗殴的行为特征，即可构成该罪。

详细分析：

1. “聚众”的具体人数要求：

   • 根据我国《刑法》及相关司法实践，聚众斗殴罪中的“聚众”并非要求双方都必须达到三人以上，而是指任一方纠集三人或三人以上进行斗殴。这意味着，即使另一方人数不足三人，只要一方达到三人以上，并实施了聚众斗殴的行为，就可能构成聚众斗殴罪。例如，若甲一方纠集了三人（包括甲自己）与乙一人进行斗殴，甲一方的行为即可能构成聚众斗殴罪。

2. 不同人数情况下的法律适用：

   • 一方人数达到标准：在司法实践中，若一方纠集三人以上进行斗殴，对该方的首要分子和积极参加者，可按聚众斗殴罪处理。这体现了法律对聚众斗殴行为的严厉打击态度，无论另一方人数多少，只要一方满足人数要求并实施了斗殴行为，就可能构成犯罪。
   • 双方人数均达到标准：当斗殴双方均有三人以上参与时，双方的首要分子和积极参加者通常都会被认定构成聚众斗殴罪。这种情况下，双方的行为都符合聚众斗殴罪的构成要件，因此都会受到法律的制裁。

3. 特殊情况的考量：

   • 若虽然参与人数较多，但只是个别人员之间发生了轻微肢体冲突，并未体现出“聚众”斗殴的故意和行为特征，则不宜认定为聚众斗殴罪。例如，若双方只是因琐事发生争执，并未纠集多人进行斗殴，且冲突程度较轻，则不构成聚众斗殴罪。
   • 聚众斗殴并不要求双方都必须具有聚众的故意。一方有聚众斗殴的故意并实施了实际的斗殴行为，而另一方即使没有聚众的故意，但在明知对方聚众前来斗殴的情况下积极参与，也可能构成聚众斗殴罪。这体现了法律对聚众斗殴行为中各方责任的全面考量。

4. 与其他罪名的区分：

   • 当斗殴双方均未达到三人以上时，即使双方人数相加达到或超过三人，也不能构成聚众斗殴罪。此时，应根据具体情况，可能以其他罪名如故意伤害罪、寻衅滋事罪等定罪处罚。例如，若双方各两人发生打斗，并造成他人轻伤或以上后果，那么参与者可能会因故意伤害罪而受到法律的制裁。

法律后果与社会影响： 聚众斗殴行为不仅破坏了社会秩序，还可能对参与者和社会造成严重的身体伤害和财产损失。因此，我国法律对此类行为采取了严厉的打击态度。一旦构成聚众斗殴罪，将面临相应的刑事处罚，包括有期徒刑、拘役或管制等。同时，聚众斗殴行为还可能对参与者的未来产生深远影响，如影响就业、升学等。

建议： 聚众斗殴罪是一个涉及多人参与的复杂罪名，其认定需严格依据法律规定和案件事实。在实际应用中，应仔细分析斗殴双方的人数、行为特征以及主观故意等因素，以确保准确适用法律。如果您或他人涉及此类问题，请直接向我咨询，我将根据您的具体情况提供准确的法律意见和帮助。