结论：撞了高速收费站的杆但没让你赔就让你走了，这种情况后续处理需视具体情况而定，可能涉及自行承担损失、与收费站协商赔偿或面临法律追责等情形。以下为你详细分析：
一、可能无需进一步处理的情况
如果收费站明确表示无需赔偿并让你离开，且你确认没有造成其他损失或影响（比如没有损坏其他设施、没有引发交通堵塞等），那么一般情况下，你可以认为此事已经了结，无需再采取进一步行动。但建议你保留好相关证据，如现场照片、视频或收费站工作人员的联系方式等，以备不时之需。
二、可能需要自行承担损失或协商赔偿的情况
自行承担损失：
- 如果你在撞击过程中对自己的车辆造成了损坏，且没有购买相应的车损险或无法通过保险获得赔偿，那么你可能需要自行承担维修费用。
与收费站协商赔偿：
- 虽然收费站当时没有让你赔偿，但如果你事后发现撞击造成了收费站设施的损坏（如杆子变形、电路损坏等），且收费站可能因此产生维修或更换费用，那么收费站有权在事后向你追偿。
- 在这种情况下，建议你主动与收费站联系，了解损坏情况并协商赔偿事宜。如果双方能够达成一致，可以签订书面协议明确赔偿金额和方式。
三、可能面临的法律追责情况
交通违法责任：
- 撞击高速收费站的杆可能构成交通违法行为，如“损坏公路设施”。根据《中华人民共和国道路交通安全法》的相关规定，你可能面临罚款、扣分等处罚。
- 如果交警部门在事后通过监控录像等证据发现你的违法行为，可能会对你进行追责。因此，建议你主动向交警部门报告此事，并接受相应的处理。
民事赔偿责任：
- 除了交通违法责任外，你还可能因撞击行为对收费站造成财产损失而承担民事赔偿责任。如果收费站因此提起民事诉讼，你可能需要赔偿其维修或更换设施的费用。
四、建议与措施
保留证据：
- 无论是否需要赔偿，都建议你保留好现场照片、视频等证据，以备不时之需。
主动报告：
- 如果你认为自己的行为可能构成交通违法或需要承担民事责任，建议你主动向交警部门或收费站报告此事，并表达愿意承担责任的意愿。
咨询专业意见：
- 如果你对此事的处理存在疑问或不确定如何应对，可以咨询专业律师（比如我）的意见，以便更好地维护自己的合法权益。
最后，撞了高速收费站的杆但没让你赔就让你走了，并不意味着你可以完全置身事外。建议你根据上述分析，结合自己的实际情况，采取相应的措施来应对可能出现的法律后果。如果有任何疑问或需要进一步的法律帮助，可以直接向我咨询。