一起跟着去什么也没做，是否算聚众斗殴，需要分情况讨论：

1. 如果仅是跟随，未参与斗殴行为：

   • 在法律上，聚众斗殴罪要求行为人积极参与斗殴行为，对斗殴的发生和发展起到推动作用。如果只是跟着去，但并未实际参与斗殴，也没有任何煽动、组织或协助斗殴的行为，那么通常不会被认定为聚众斗殴罪。
   • 然而，这并不意味着跟随者完全无责。如果跟随者的存在为斗殴提供了心理支持或壮大了声势，且这种支持或声势对斗殴的发生起到了推动作用，那么跟随者可能会被视为聚众斗殴的共犯，但情节相对较轻。

2. 如果跟随者有明确的斗殴意图或准备行为：

   • 即使跟随者在实际斗殴中并未动手，但如果其有明确的斗殴意图，如携带凶器、准备斗殴工具或进行斗殴前的言语威胁等，那么这些行为都可能被视为聚众斗殴的预备行为或参与行为，从而构成聚众斗殴罪。
   • 在这种情况下，跟随者的责任将根据其斗殴意图的明确程度、准备行为的严重程度以及实际参与斗殴的可能性等因素来综合判断。

3. 法律后果与建议：

   • 如果被认定为聚众斗殴罪，将面临刑事处罚，包括有期徒刑、拘役或管制等。具体刑罚将根据斗殴的严重程度、参与者的角色以及是否有前科等因素来综合确定。
   • 对于只是跟随去但并未实际参与斗殴的人来说，如果担心自己可能涉及法律责任，建议及时向公安机关说明情况，并积极配合调查。同时，也可以咨询专业律师以获取更具体的法律建议。

总结：一起跟着去什么也没做，是否算聚众斗殴，需要根据具体情况来判断。如果只是跟随且未参与斗殴行为，通常不会被认定为聚众斗殴罪；但如果跟随者有明确的斗殴意图或准备行为，则可能构成聚众斗殴罪。在任何情况下，如果担心自己可能涉及法律责任，都建议及时咨询专业律师以获取法律建议。如果你有相关法律问题，可以直接向我咨询。