大货车不让行人的处罚主要依据《中华人民共和国道路交通安全法》的相关规定，具体处罚情况如下：
一般情况下的处罚：
- 根据《道路交通安全法》第四十七条，机动车行经人行横道时，应当减速行驶；遇行人正在通过人行横道，应当停车让行。如果大货车未遵守这一规定，即未停车让行正在通过人行横道的行人，那么根据该法第九十条，机动车驾驶人违反道路交通安全法律、法规关于道路通行规定的，处警告或者二十元以上二百元以下罚款。
造成严重后果的处罚：
- 如果大货车不让行人的行为导致了交通事故，特别是造成了人员伤亡或财产损失，那么处罚将更为严厉。根据《道路交通安全法》的相关规定，机动车驾驶人可能面临吊销机动车驾驶证、终身禁驾等处罚，同时还需要承担相应的民事赔偿责任。在极端情况下，如果行为构成犯罪，如交通肇事罪，那么驾驶人还将面临刑事处罚。
特殊情况下的考虑：
- 在某些特殊情况下，如行人闯红灯、不走人行横道等违法行为，虽然这并不减轻机动车驾驶人的让行义务，但在处理交通事故或进行处罚时，可能会作为考虑因素之一。然而，这并不意味着机动车驾驶人可以因此免除让行责任或减轻处罚。
法律建议：
- 作为机动车驾驶人，特别是大货车驾驶人，应当严格遵守交通法规，特别是在行经人行横道时，务必减速行驶并停车让行行人。这不仅是法律规定的义务，也是保障行人安全、维护交通秩序的重要举措。
- 如果遇到行人违法行为，如闯红灯、不走人行横道等，驾驶人应当保持冷静，采取合理措施避免事故发生，并及时向交警部门报告。
- 如果因不让行人而受到处罚或面临法律纠纷，建议及时咨询专业律师，了解自身权利和义务，并寻求合法途径解决问题。
可能后果：
- 不让行人的行为不仅可能导致罚款、扣分等行政处罚，还可能引发交通事故，造成人员伤亡和财产损失。在严重情况下，还可能面临刑事处罚和民事赔偿。
如有任何关于交通运输或交通违章方面的法律问题，都可以直接向我咨询，我会为你提供专业的法律解答。