当货车不慎将限高杆撞掉时，交警会根据具体情况对司机进行相应的处罚。以下是对此问题的详细解答：
一、民事赔偿责任
首先，货车司机需要承担民事赔偿责任。限高杆作为公共设施，其修复或重置费用，以及因损坏导致的其他经济损失（如交通疏导费用、其他车辆因拥堵产生的损失等），都需要由司机来承担。赔偿金额会根据限高杆的实际价值、损坏程度以及因此产生的其他合理费用来确定。
二、行政处罚
一般违规处罚：
- 如果货车司机在撞掉限高杆后没有逃逸，而是立即停车并报警，交警会根据《道路交通安全法》的相关规定，对司机进行警告或处以20元以上200元以下的罚款，具体取决于违规的严重程度。
逃逸行为处罚：
- 如果货车司机在撞掉限高杆后选择逃逸，这将构成交通肇事逃逸行为。根据《道路交通安全法》第九十九条，司机将面临二百元以上二千元以下的罚款，并可能并处十五日以下的拘留。同时，根据《道路交通安全违法行为记分管理办法》，司机还可能被记6分至12分。
其他违法行为处罚：
- 如果货车司机在撞杆时还存在其他违法行为，如超速、超载、未取得机动车驾驶证或驾驶证被吊销、暂扣期间驾驶机动车等，交警将根据《道路交通安全法》的相关规定，对司机进行相应的处罚。
扰乱公共秩序处罚：
- 如果撞杆行为导致严重交通拥堵，扰乱了正常的交通秩序，交警还可以依据《治安管理处罚法》以“扰乱公共秩序”对司机进行处罚，处警告或者二百元以下罚款；情节较重的，处五日以上十日以下拘留，可以并处五百元以下罚款。若为故意撞杆，则可能面临更严厉的治安管理处罚。
三、刑事责任
在极端情况下，如果撞掉限高杆的行为造成了严重后果，如他人重伤、死亡或公私财产重大损失，并且司机负主要或全部责任，那么司机可能构成交通肇事罪。根据《中华人民共和国刑法》的相关规定，司机将面临三年以下有期徒刑、拘役，或三年以上七年以下有期徒刑，甚至七年以上有期徒刑的刑罚。
四、建议与总结
- 立即停车并报警：一旦不慎撞掉限高杆，货车司机应立即停车，保护现场，并及时报警等待交警到来处理。
- 配合调查：司机应积极配合交警的调查工作，如实陈述事故经过，提供相关证据。
- 承担责任：司机应主动承担民事赔偿责任，避免逃逸或其他违法行为的发生。
- 加强安全意识：货车司机应加强交通安全意识，遵守道路交通安全法律法规，确保行车安全。
总之，撞掉限高杆后，货车司机将面临民事赔偿、行政处罚乃至刑事责任等多重法律后果。因此，建议司机在驾驶过程中严格遵守交通规则，一旦发生事故，应冷静处理，依法履行义务。