如果都是直行箭头但走错了方向，一般会被判定为“不按导向车道行驶”，是交通违规行为，可能会被警告或处以20元以上200元以下罚款。具体解释如下：

1. 交通法规规定：根据《中华人民共和国道路交通安全法实施条例》第五十一条，机动车通过有交通信号灯控制的交叉路口时，应当按照下列规定通行：（一）在划有导向车道的路口，按所需行进方向驶入导向车道。因此，如果走错了导向车道，就违反了这一规定。

2. 处罚措施：根据《中华人民共和国道路交通安全法》第九十条，机动车驾驶人违反道路交通安全法律、法规关于道路通行规定的，处警告或者二十元以上二百元以下罚款。本法另有规定的，依照规定处罚。因此，不按导向车道行驶可能会被警告或处以20元以上200元以下罚款。

3. 实际执行情况：具体的处罚力度可能会因地区、交警的执法尺度以及违规情节的严重程度而有所不同。一般情况下，如果驾驶员及时纠正错误，且未造成交通拥堵或安全事故，可能会得到较轻的处罚或者只是警告。

综上所述，都是直行箭头但走错了方向是交通违规行为，可能会受到警告或罚款的处罚。建议驾驶员在行驶过程中严格遵守交通规则，按照导向车道行驶，以避免不必要的处罚和安全隐患。如果你还有其他交通法律方面的问题，可以直接向我咨询。