在不知情的情况下撞限高杆后离开，仍然需要处理。以下是对此情况的具体分析：

一. 法律责任分析

1. 民事赔偿责任：

   • 根据《中华人民共和国民法典》第一千一百六十七条和第一千一百八十四条，即使是不知情的情况下撞坏了限高杆，也构成了对公共财产的侵权，需要按损失发生时的市场价格或其他合理方式承担赔偿责任。

2. 行政处罚：

   • 根据《道路交通安全法》第九十九条，造成交通事故后逃逸，尚不构成犯罪的，由公安交通管理部门处二百元以上二千元以下罚款，可以并处十五日以下拘留。撞限高杆后离开，若被认定为逃逸行为，将受到相应的行政处罚。

3. 刑事责任：

   • 若撞限高杆的行为导致重大人员伤亡或财产损失，且符合交通肇事罪的构成要件，即使是不知情的情况下，也可能被追究刑事责任。

二. 处理建议

1. 主动报案：

   • 建议尽快向交警部门报案，说明事故情况，并配合调查。这有助于减轻或免除因逃逸而可能面临的更严厉的处罚。

2. 协商赔偿：

   • 与限高杆的管理部门或公安机关交通管理部门协商赔偿事宜，按照损失情况支付相应的赔偿费用。

3. 承担法律责任：

   • 如需承担行政处罚或刑事责任，应依法接受处理，并吸取教训，加强交通安全意识。

我的观点：虽然是在不知情的情况下撞了限高杆，但并不能免除相应的法律责任。建议尽快主动报案，与相关部门协商赔偿事宜，并依法承担可能的法律责任。如有进一步需要，您可以继续咨询我。