结论：团伙打架时没动手是否要承担责任，需根据具体情况判断。若存在教唆、策划、助威、起哄或构成共同危险行为等情形，仍可能承担民事、行政或刑事责任；若确实未参与任何不当行为，则无需担责。以下从多个角度详细分析：
一、民事责任角度
教唆、策划行为
若你虽未直接动手，但教唆或策划了打架事件（例如怂恿他人动手、制定打架计划），且你的行为与损害结果存在因果关系，则需与直接实施者承担连带赔偿责任。
例子：A教唆B殴打C，A虽未动手，但需对C的医疗费、误工费等损失负责。
共同危险行为
在多人参与的打架场景中，若你虽未直接动手，但整体行为制造了危险状态（例如多人围堵、威胁受害者），且无法确定具体致害人，所有参与者均可能对伤者承担民事赔偿责任。
例子：多人围住D并推搡，其中一人动手打伤D，但无法查明是谁动手，此时所有围堵者均可能被要求赔偿。
先行行为引发的义务
若你的先行行为使受害者陷入危险状态（例如将受害者引至打架现场），且未履行救助义务导致损害扩大，可能需承担相应的民事赔偿责任。
二、行政责任角度
现场助威、起哄等行为
在打架现场进行助威、起哄（例如高声叫骂、鼓掌鼓励），虽未直接参与打斗，但扰乱了社会治安秩序。根据《治安管理处罚法》，此类行为可被处以5日以上10日以下拘留，并可并处500元以下罚款；情节较重的，处10日以上15日以下拘留，并可并处1000元以下罚款。
例子：E在打架现场大声起哄，被警方认定为“结伙斗殴”的参与者，受到行政处罚。
结伙斗殴的认定
若你与实际动手者构成“结伙”（即存在主观上的共同故意和客观上的协同行为，例如共同前往现场、为打架创造条件），即使未直接动手，也可能被视为参与了结伙斗殴，面临行政处罚。
三、刑事责任角度
聚众斗殴罪共犯
若打架事件构成聚众斗殴犯罪，且你作为组织者、策划者、指挥者或积极参加者（例如负责望风、提供工具、召集人员），即使未直接动手，仍可能被认定为共同犯罪并承担刑事责任。
法律依据：根据《刑法》第二百九十二条，聚众斗殴的首要分子和其他积极参加者，处三年以下有期徒刑、拘役或者管制；多次聚众斗殴、人数多规模大、在公共场所或交通要道聚众斗殴等情形，处三年以上十年以下有期徒刑。
例子：F组织多人与他人斗殴，F虽未动手，但因其组织行为是关键因素，被认定为首要分子并承担刑事责任。
其他犯罪共犯
在寻衅滋事、故意伤害等案件中，若你虽未动手，但主观上有共同故意（例如明知他人要打架仍提供帮助），或为实施犯罪行为创造条件（例如提供凶器、隐藏证据），同样需承担刑事责任。
例子：G明知H等人要去打架，仍提供钢管作为凶器，G虽未动手，但构成寻衅滋事罪的共犯。
特殊情况：本能阻止而未阻止
若你本能有能力阻止打架却未采取行动（例如作为在场唯一成年人未制止未成年人斗殴），导致事态扩大，也可能需承担一定责任。但此类情况需结合具体情境和法律规定判断，实践中较少见。
四、无需承担责任的情况
若你仅是恰好出现在打架现场，未参与任何预谋、实施打架行为，也没有提供任何形式的帮助或煽动（例如单纯围观、路过），则一般不承担法律责任。
例子：J路过打架现场，未停留、未发声，也未提供任何帮助，无需担责。
五、综合建议
总结：团伙打架时未直接动手并不意味着可以完全免除责任。是否担责需结合你的具体行为、主观意图及与事件结果的关联性综合判断。若涉及法律纠纷，可直接向我咨询，我会根据你的情况提供详细法律建议。