聚众斗殴并非全部人员都要拘留，是否拘留需根据案件具体情况及参与人员的行为、作用等因素综合判断。以下是对此问题的详细分析：
一、法律对聚众斗殴罪的规定
根据《中华人民共和国刑法》第二百九十二条的规定，聚众斗殴罪主要处罚的是首要分子和其他积极参加者。首要分子是指在聚众斗殴中起组织、策划、指挥作用的犯罪分子；其他积极参加者则是指除首要分子以外，在聚众斗殴中发挥重要作用或直接参与斗殴并表现积极的人。对于这类人员，根据案件情节的严重程度，可能面临三年以下有期徒刑、拘役或者管制，直至三年以上十年以下有期徒刑的刑罚。
二、不同参与者的处理情况
首要分子和积极参加者：
- 这类人员通常会被追究刑事责任，并可能面临拘留措施。拘留的期限一般不超过14天，最长不能超过37天，具体取决于案件的复杂性和证据收集情况。
一般参与者：
- 对于聚众斗殴中的一般参与者，即那些并未起到组织、策划、指挥作用，也未直接积极参与斗殴或所起作用较小的人员，通常不会构成聚众斗殴罪，因此不会承担刑事责任。
- 但是，这并不意味着他们完全没有法律后果。根据《中华人民共和国治安管理处罚法》的相关规定，这些人员可能会受到警告、罚款、行政拘留等行政处罚。不过，这种行政拘留与刑事拘留是不同的，行政拘留的期限通常较短，且不会留下犯罪记录。
受害者：
- 如果另一方是受害者，则不会拘留。因为聚众斗殴罪只处罚首要分子和其他积极参加的犯罪分子，对于不属于这两种人的受害者，不构成聚众斗殴罪，无需承担刑事责任。
三、其他影响因素
自首与立功表现：
- 如果参与者有自首或立功表现，可以从轻或减轻处罚。这可能会影响是否采取拘留措施以及拘留的期限。
赔偿与谅解：
- 积极赔偿被害人损失并取得谅解的，也可以作为量刑时的考虑因素。这可能会影响案件的最终处理结果，包括是否采取拘留措施。
案件情节的严重程度：
- 案件情节的严重程度是决定是否拘留以及拘留期限的重要因素。如果聚众斗殴行为造成了严重的社会影响或人身伤害，那么参与者更可能面临拘留措施。
四、法律建议
鉴于聚众斗殴案件的复杂性和严重性，如果你或你身边的人涉及此类问题，建议尽快向我咨询。作为专业律师，我能够根据你的具体情况，为你提供针对性的法律分析和建议，帮助你更好地了解相关法律规定，并制定合适的解决方案。同时，也提醒广大公众要遵守法律法规，不参与任何形式的聚众斗殴行为，以免给自己和他人带来不必要的法律风险和伤害。