结论前置：工厂只涨罚款不涨工资的行为是否违法，需结合具体情况判断，主要涉及罚款的合法性、合理性及工资调整的强制性要求。以下是具体分析：

1. 工厂罚款的合法性边界

根据《劳动合同法》及《工资支付暂行规定》，用人单位对劳动者罚款需满足以下条件：

• 法定依据：罚款需基于法律法规明确授权（如《安全生产法》对违规操作的处罚），或劳动合同、规章制度中经民主程序制定且公示的条款。
  
• 比例限制：罚款金额不得超过劳动者当月工资的20%，且扣除后剩余工资不得低于当地最低工资标准。
  
• 程序合规：罚款需有事实依据（如违规记录），并告知劳动者申诉权利。
  

若工厂罚款无合法依据或超出比例，则属于违法行为，劳动者可要求返还罚款并主张赔偿。

2. 工资调整的强制性要求

• 法定涨薪情形：除地方性最低工资标准调整外，用人单位无法律义务主动涨薪。但若劳动合同约定“随效益调整工资”或集体合同有相关条款，工厂需履行约定。
  
• 单方降薪的违法性：若工厂以“不涨工资即降薪”变相逼迫劳动者接受，可能构成未及时足额支付劳动报酬，劳动者可依据《劳动合同法》第38条解除合同并主张经济补偿。
  

若工厂未违反最低工资标准或合同约定，仅未涨薪不直接构成违法。

3. 综合判断与维权建议

• 若罚款违法：劳动者可向劳动监察部门投诉（需保留罚款通知、工资条等证据），或申请劳动仲裁要求返还罚款、补发工资差额。
  
• 若工资未达最低标准：可主张补足差额并要求赔偿。
  
• 若合同有涨薪约定：可要求工厂履行或主张违约责任。
  

行动建议：

1. 核查工厂罚款依据（如规章制度是否公示、罚款是否超比例）；
   
2. 对比当地最低工资标准及劳动合同条款；
   
3. 保留证据（工资条、罚款通知、沟通记录等），通过劳动仲裁或诉讼维权。
   

如有进一步细节（如罚款具体事由、合同条款等），可继续向我咨询，我会结合具体情形提供法律方案。