在等红绿灯时上下人，其合法性与处罚措施确实需要根据具体情况来详细分析。以下是对此问题的详细解答：
一、基本结论
在等红绿灯时上下人，如果未妨碍其他车辆和行人通行，且未违反禁止停车的相关规定，那么这一行为通常不构成违法。然而，如果违反了相关法规，比如红绿灯路口设有禁止停车标志或标线，或者占用了公交专用道等，那么驾驶人将面临罚款、扣分等处罚。
二、具体处罚情况分析
普通道路：
- 在没有禁止停车标志标线的普通道路红绿灯路口等红灯时上下人，如果未妨碍其他车辆和行人的正常通行，一般不被认定为违法行为。但如果因此造成了交通堵塞或影响了其他车辆的正常行驶，根据《中华人民共和国道路交通安全法》的相关规定，驾驶人可能会面临口头警告或20元以上200元以下的罚款，并被要求立即驶离。
设有禁止停车标志标线的道路：
- 如果红绿灯路口设有禁止停车的标志或标线，那么在此处等红灯上下人就属于违法停车行为。依据相关法律法规，驾驶人一般会被处以20元以上200元以下的罚款，同时驾驶证记3分。
公交专用道：
- 社会车辆若在公交专用道对应的红绿灯路口等红灯时上下人，这属于违法占用公交专用道。根据不同地区的具体法规，驾驶人一般会面临100-300元不等的罚款，部分地区可能还会记2分。
高速公路：
- 在高速公路的红绿灯路口（如部分高速匝道口）等红灯时上下人，是严重的违法行为。根据相关法律法规，驾驶人可能会被罚款200元，并记6分。如果因此引发了交通事故等严重后果，驾驶人还需承担更严重的法律责任。
三、法律依据
- 《中华人民共和国道路交通安全法》及其实施条例中明确规定了交通信号、车辆和行人的通行原则，以及机动车在道路上临时停车的具体规定。这些法规为处罚等红绿灯时违法上下人的行为提供了明确的法律依据。
四、特殊情况与处理建议
- 公共汽车等特定车辆：在设定的站点上下乘客是合法的，但在非站点停车上下人则视为违规。
- 紧急情况：虽然法律对紧急情况有一定的豁免条款，但驾驶人仍应在遵守交通规则的前提下，寻找合适且安全的地方进行上下人。
五、一般建议
为了避免不必要的处罚和潜在的安全风险，我建议驾驶人在等红绿灯时尽量避免上下人。如果确实需要上下人，应选择合法且安全的地点，如专门的停车场或路边划定的停车位。同时，驾驶人也应增强交通安全意识，确保自身和他人的安全。
综上所述，等红绿灯时上下人的行为是否违法以及处罚措施，取决于具体的道路情况和是否违反了相关法规。为了遵守交通规则并保障自身和他人的安全，请驾驶人在等红绿灯时谨慎操作。