安全员在工地上一般无权直接对违章工人进行罚款，罚款权通常归属于具有行政处罚权的行政机关或经法律明确授权的主体。以下从不同角度为你详细分析：

从法律授权角度

在我国，罚款属于行政处罚的一种。根据《行政处罚法》的规定，行政处罚由具有行政处罚权的行政机关在法定职权范围内实施，法律、法规授权的具有管理公共事务职能的组织可以在法定授权范围内实施行政处罚。工地安全员通常是受施工单位雇佣，负责施工现场安全管理工作的人员，并不属于具有行政处罚权的行政机关，也没有法律、法规的明确授权，所以其本身不具备直接对违章工人进行罚款的权力。

从企业内部管理角度

• 若企业有合法有效的规章制度：施工单位为了加强施工现场管理，保障安全生产，可能会在企业内部规章制度中规定对违章行为的处罚措施，包括罚款。但即使在这种情况下，企业行使罚款权也需要满足一定条件。首先，该规章制度必须依法制定，经过民主程序（如职工代表大会讨论等）并公示告知工人；其次，罚款的数额应当合理，不能超出法律规定的限度。一般来说，根据《工资支付暂行规定》，因劳动者本人原因给用人单位造成经济损失的，用人单位可按照劳动合同的约定要求其赔偿经济损失，经济损失的赔偿，可从劳动者本人的工资中扣除，但每月扣除的部分不得超过劳动者当月工资的20%。若企业规章制度中的罚款规定违反了这些原则，那么该规定可能是无效的。
• 若企业规章制度不合法或未依法制定：如果施工单位的企业内部规章制度没有经过合法程序制定，或者罚款规定违反了法律法规的强制性规定，那么安全员依据这样的规章制度对工人进行罚款就是不合法的。工人有权拒绝缴纳罚款，并且可以向劳动监察部门投诉，维护自己的合法权益。

实际建议

• 对于工人：如果安全员对你进行罚款，你可以要求其出示合法的罚款依据，包括企业的规章制度、相关法律法规等。如果认为罚款不合理或不合法，可以拒绝缴纳，并与施工单位协商解决。如果协商不成，可以向当地劳动监察部门投诉，或者申请劳动仲裁，通过法律途径维护自己的权益。
• 对于施工单位：应当依法制定企业内部规章制度，明确安全管理的职责和处罚措施，确保规章制度的合法性和合理性。同时，加强对安全员的培训和管理，避免安全员滥用权力，引发劳动纠纷。

如果你在工地安全或劳动权益方面还有其他问题，欢迎随时向我咨询。