结论：工厂以不拿离岗证为由罚款是否合法需分情况判断，关键在于罚款依据是否符合法律规定。

1. 若工厂罚款无明确制度依据，或制度未通过民主程序制定并公示，则不合法
   根据《劳动合同法》第四条，用人单位制定涉及劳动者切身利益的规章制度（如罚款规定），需经职工代表大会或全体职工讨论，提出方案和意见，并与工会或职工代表平等协商确定，且需向劳动者公示。若工厂未履行上述程序，直接以“不拿离岗证”为由罚款，属于违法。

2. 若工厂制度合法且罚款金额合理，可能被认定为合法管理行为
   若工厂通过民主程序制定了包含“离岗证管理”的规章制度，并明确规定未携带离岗证的处罚措施（如罚款），且罚款金额未超过当地政府规定的比例（如《工资支付暂行规定》第十六条，罚款不得超过当月工资的20%），则可能被认定为合法管理行为。但需注意，法律对用人单位罚款权有严格限制，实践中多数地区倾向于认为用人单位无权直接罚款，更合理的做法是通过警告、扣减绩效等方式处理。

3. 若罚款实质是克扣工资，则违法
   根据《工资支付暂行规定》第十五条，用人单位不得克扣劳动者工资，除非因劳动者本人原因给用人单位造成经济损失。若工厂以“不拿离岗证”为由直接从工资中扣款，且无法证明该行为与经济损失存在直接关联，则属于违法克扣工资，劳动者可要求补发并主张赔偿。

建议：

• 劳动者可要求工厂出示罚款依据的规章制度及民主程序证明；
  
• 若认为罚款违法，可向当地劳动监察大队投诉或申请劳动仲裁；
  
• 工厂应优先通过培训、提醒等方式规范管理，避免直接罚款引发纠纷。
  

如有进一步疑问，可直接向我咨询具体处理方案。