打架双方并不一定都要被拘留，是否拘留取决于案件的具体情节、双方的过错程度以及是否存在免责条件。以下是对此问题的详细分析：
一、不需要拘留的情况
情节特别轻微：
- 如果双方因琐事发生肢体冲突，但冲突很快停止，且未造成任何伤害后果或伤害极其轻微（如只是轻微的推搡，没有造成体表损伤），根据《中华人民共和国治安管理处罚法》第九条，公安机关可以对此类情况进行调解处理。若当事人达成协议，则不予处罚。
一方正当防卫：
- 如果在打架过程中，一方是为了保护自己或他人免受正在进行的不法侵害而采取的制止行为，且该行为未超出必要限度，那么这一方属于正当防卫，通常不会被拘留。例如，甲无故挑衅并先动手殴打乙，乙在遭受攻击时为了保护自己进行反击，且反击行为没有超过必要限度，那么甲可能会被拘留，而乙则不会。
一方未达到责任年龄或存在免责情形：
- 如果参与打架的一方未达到治安管理处罚法规定的责任年龄（如不满十四周岁），或者存在其他符合免责的情形（如精神病人在不能辨认或控制自己行为时违反治安管理），则该方不会被拘留。对于未成年人，应责令其监护人严加管教；对于精神病人，应责令其监护人严加看管和治疗。
双方达成和解或调解：
- 即使双方都有过错，但如果能够达成和解或调解，也可能避免被拘留。这体现了法律对和谐解决纠纷的倡导。
二、需要拘留的情况
双方均有过错且情节较轻：
- 当双方都参与了打架斗殴行为，且情节较轻，虽不构成犯罪，但违反了《中华人民共和国治安管理处罚法》时，公安机关有权根据具体情节对双方都处以拘留等治安处罚。例如，甲乙两人因琐事发生口角并升级为肢体冲突，双方均有动手行为，且伤势均不严重，未构成轻伤以上后果。在这种情况下，公安机关通常会对甲乙双方都进行拘留处理。
一方过错明显且情节较重：
- 如果在打架过程中，一方存在明显过错，如故意挑衅、无端滋事或使用凶器等，且情节较重（如造成人员轻伤及以上伤害或引发公共秩序混乱），那么这一方很可能被拘留。同时，如果另一方虽然也有动手行为，但情节较轻且属于被动反击，那么另一方可能不会被拘留或处罚较轻。
构成刑事犯罪：
- 如果打架造成他人轻伤以上后果，构成故意伤害罪等刑事犯罪，那么依据《中华人民共和国刑法》的相关规定，犯罪嫌疑人将面临三年以下有期徒刑、拘役或者管制等刑罚。在刑事诉讼过程中，犯罪嫌疑人可能会被采取刑事拘留等强制措施。
三、综合考虑因素
- 调查与责任认定：公安机关会首先进行调查，了解事情的具体经过、原因以及各方的责任。这是决定是否拘留的重要前提。
- 伤势与过错程度：双方的伤势、过错程度以及社会危害性是决定是否拘留的重要因素。如果一方伤势较重或过错明显，那么这一方更可能被拘留。
- 和解与调解：即使双方都有过错，但如果能够达成和解或调解，也可能避免被拘留。这体现了法律对和谐解决纠纷的倡导和鼓励。
总结与建议：打架是一种违法行为，不仅可能给自己和他人带来身体伤害，还可能面临法律制裁。因此，建议大家在遇到纠纷时保持冷静，通过和平方式解决矛盾。如果确实无法避免冲突，也应尽量控制自己的行为，避免造成严重后果。如果你或你身边的人涉及此类事件，可以直接向我咨询以了解具体的法律后果和应对策略。