不小心走了公交车限行路段，其处罚情况确实会因地区、时段以及具体情形而有所不同。不过，我可以根据普遍的交通法规和常见做法，给您一个相对全面的解答。
首先，从违法性质上来看，走公交车限行路段通常属于不按规定车道行驶，这违反了《中华人民共和国道路交通安全法》中关于车辆应按照交通信号通行的规定。
关于罚款： 根据该法第九十条，机动车驾驶人违反道路交通安全法律、法规关于道路通行规定的，会面临警告或者二十元以上二百元以下的罚款。在实际执行中，多数地区对这类违规行为的罚款金额设定在100元至200元之间。
关于记分： 记分情况则因地区而异。一般来说，走公交专用车道可能会被扣除驾驶证分数，可能是1分、2分或3分，具体需要参照您所在地的交通管理部门的规定。
特殊时段与特定标识情形：
特殊时段：比如在工作日的高峰时段，社会车辆驶入公交专用道会严重影响公共交通的优先通行权。这时，处罚通常更为严格，罚款金额可能在100元至200元之间，并可能记2分或更多。例如，北京在工作日的特定时段就禁止非公交车辆驶入公交专用道，违者将被处以200元罚款，并记2分。
特定公交专用道标识：如全时段公交专用道，意味着任何时间都不允许社会车辆驶入。违规驶入的处罚也相对严厉，通常罚款在100元至200元之间，并可能记2分或按当地更严格的规定执行。
特殊情况处理：
短暂进出或穿越：如果您在规定时间内仅短暂地进出或穿越公共汽车通道，且未影响公交车辆正常行驶，通常不会被视为违法行为。
特殊天气或路况：在特大暴雨、路面车道线无法看清或前方修路、事故等特殊情况下误入公交车道，您可以向交通部门申诉复议，有可能免于处罚。
交警指挥：在交通拥堵等特殊情况下，如果经交警指挥驶入公交车道，则不构成违规，不予处罚。
注意事项与建议：
了解当地规定：由于各地处罚规定存在差异，建议您在行驶前充分了解当地的具体规定。
遵守交通规则：无论何种情况，都应严格遵守交通规则，确保行车安全。
及时驶出：如果不小心误入公交车道，应立即驶出并避免长时间行驶。
申请行政复议或诉讼：如果您对处罚决定不服，可以在规定时间内通过合法途径申请行政复议或提起行政诉讼。
综上所述，不小心走了公交车限行路段的处罚情况确实复杂多变。为了确保您的行车安全和避免不必要的麻烦，建议您时刻保持警惕，严格遵守交通规则，并根据当地的具体规定调整自己的驾驶行为。