撞坏限高杆后逃逸，即使对方不追究，您仍然需要面对一系列的法律责任和处理流程。以下是对这一问题的详细解答：
一、民事赔偿责任
法律依据： 根据《中华人民共和国民法典》的相关规定，撞坏限高杆的侵权人需要承担民事赔偿责任。具体来说，您需要按照损失发生时的市场价格或其他合理方式，对限高杆的所有者或管理者进行损害赔偿。
赔偿范围： 赔偿范围不仅包括限高杆的修复或重置费用，还可能包括因限高杆损坏导致的交通拥堵给其他方造成的经济损失，如营运车辆的停运损失等。
保险赔付： 通常，这类赔偿会由车辆所投保的保险公司在机动车第三者责任强制保险责任限额范围内先行赔付。如果保险赔付不足，剩余部分需要由您自行承担。
二、行政处罚
逃逸行为的处罚： 撞坏限高杆后逃逸，根据《道路交通安全法》的相关规定，您将受到二百元以上二千元以下罚款，并可能并处十五日以下拘留。此外，您的驾驶证还可能会被记12分。
其他违法行为的处罚： 如果撞杆行为还涉及未取得机动车驾驶证、驾驶证被吊销或暂扣期间驾驶机动车等违法情形，您也将根据《道路交通安全法》的相关规定承担相应法律责任。
扰乱公共秩序的处罚： 如果撞限高杆行为造成严重交通拥堵，扰乱正常交通秩序，您还可能依据《治安管理处罚法》以“扰乱公共秩序”进行处罚，处警告或者二百元以下罚款；情节较重的，处五日以上十日以下拘留，可以并处五百元以下罚款。若为故意撞杆，则可能面临更严厉的治安管理处罚。
三、刑事责任（在特定情况下）
交通肇事罪： 如果撞限高杆的行为造成重大人员伤亡或财产损失，且符合交通肇事罪的构成要件（如酒驾、无证驾驶等），您将被追究刑事责任。根据情节轻重，可能处三年以下有期徒刑或者拘役，直至七年以上有期徒刑。
故意毁坏财物罪： 如果撞落限高杆造成公共设施重大损失，达到一定标准，您还可能涉嫌故意毁坏财物罪。
四、建议与总结
立即自首： 撞坏限高杆后逃逸是严重的违法行为，建议您立即向公安机关自首，如实供述罪行。这样能争取从轻或减轻处罚，因为自首情节通常被视为认罪态度良好，会对量刑产生影响。
积极配合处理： 逃避并非解决问题的办法，及时面对并配合处理才是正确之举。您需要积极配合相关部门的调查和处理工作，主动承担民事赔偿责任。
加强交通安全意识： 为了避免类似事件的发生，建议您加强交通安全意识，遵守道路交通安全法律法规，确保行车安全。
咨询专业律师： 在处理过程中，如果您对法律责任或处理流程有疑问，建议咨询专业律师以获取更具体的法律指导和帮助。
总之，撞坏限高杆后逃逸即使对方不追究，您仍然需要面对一系列的法律责任和处理流程。建议您立即自首并积极配合处理工作，以减轻可能的法律后果。