工厂总是跟员工要钱，这种行为是否违法，需要分情况讨论：

1. 若工厂要求员工支付的费用属于非法收费：

   • 根据《中华人民共和国劳动法》及相关规定，用人单位不得以任何名义向劳动者收取财物，包括但不限于押金、培训费、服装费等。如果工厂以这些名义向员工收取费用，那么这种行为是违法的。员工有权拒绝支付，并可以向当地劳动监察部门投诉，要求工厂退还已收取的费用，甚至可能因此获得相应的赔偿。

2. 若工厂要求员工支付的费用属于合法范畴内的代扣代缴：

   • 在某些情况下，工厂可能需要根据法律法规或劳动合同的约定，从员工工资中代扣代缴一些费用，如个人所得税、社会保险费等。这种代扣代缴行为是合法的，但工厂必须确保代扣代缴的金额准确无误，并及时向相关部门缴纳。如果工厂存在多扣、少扣或未及时缴纳的情况，员工有权向工厂提出异议，并要求工厂进行更正。

3. 若工厂以罚款等名义向员工收取费用：

   • 除非员工因违反工厂规章制度或法律法规而给工厂造成损失，且工厂能够证明损失的具体金额，否则工厂不得以罚款等名义向员工收取费用。如果工厂未经合法程序，擅自对员工进行罚款，那么这种行为也是违法的。员工同样有权拒绝支付，并向劳动监察部门投诉。

法律建议：

• 面对工厂的不合理收费要求，员工应首先了解相关法律法规和劳动合同的约定，明确自己的权益和义务。
• 如果认为工厂的收费行为违法或不合理，员工可以与工厂进行协商，要求工厂停止违法行为并退还已收取的费用。
• 如果协商无果，员工可以向当地劳动监察部门投诉，寻求政府部门的帮助和支持。
• 在必要时，员工还可以考虑通过法律途径维护自己的合法权益，如向劳动争议仲裁委员会申请仲裁或向人民法院提起诉讼。

可能后果：

• 如果工厂的收费行为被认定为违法，工厂可能面临劳动监察部门的处罚，包括罚款、责令改正等。
• 同时，工厂还可能因违法行为而损害其声誉和形象，影响其与员工的关系和业务发展。
• 对于员工而言，如果因工厂的违法行为而遭受损失，员工有权要求工厂进行赔偿。

总之，工厂总是跟员工要钱是否违法，取决于收费的性质和合法性。员工在面对这种情况时，应保持冷静和理性，了解自己的权益和义务，并采取合适的措施来维护自己的合法权益。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。