用人单位在任何情况下都没有罚款权，只要实施了罚款行为，无论金额多少，原则上均属于违法。不过，具体是否违法以及法律后果需结合以下角度分析：

1. 法律定性角度
   根据《劳动合同法》第九条及《工资支付暂行规定》第十六条，用人单位并非行政机关或司法机关，不具备罚款的法定主体资格。即使员工存在迟到、早退、旷工等违纪行为，用人单位也仅能通过扣减绩效工资、奖金或要求赔偿实际损失（需举证）等方式处理，且扣减金额不得超过当月工资的20%，且扣除后剩余工资不得低于当地最低工资标准。若直接以“罚款”名义扣减工资，即构成违法。

2. 金额与程序角度

• 金额无合法阈值：法律未规定“罚款多少算违法”的金额标准，因为罚款行为本身即违法，与金额无关。
  
• 程序违法性：即使用人单位通过内部规章制度规定罚款，若该制度未经民主程序（如职工代表大会讨论）制定、未公示或未告知员工，亦属无效。员工有权拒绝执行，并可要求用人单位返还被扣款项。

1. 法律后果与救济途径
   

• 员工权利：若被罚款，员工可向当地劳动监察大队投诉（时效2年内），或申请劳动仲裁要求返还罚款、支付经济补偿（如因此被迫离职）。
  
• 用人单位风险：除返还罚款外，若罚款行为被认定为“未及时足额支付劳动报酬”，员工可依据《劳动合同法》第三十八条解除合同并主张经济补偿金（按工作年限，每满1年支付1个月工资）。

建议：若您遭遇单位罚款，可先保留工资条、罚款通知等证据，通过书面形式向单位提出异议；若协商无果，可直接向我咨询具体维权步骤，我将结合您的具体情况提供详细方案。