工厂克扣你的钱是否违法，这取决于具体的情况和依据。以下是对此问题的详细分析：

结论前置：工厂克扣钱并非一概而论地违法或合法，需要具体情况具体分析。若工厂有合理合法的依据，并遵循法定程序，则扣钱行为可能合法；反之，若无合理依据或未遵循法定程序，则扣钱行为违法。

合法扣工资的情形：

1. 代扣代缴费用：工厂可以依法代扣代缴社保、个税等费用。
2. 经济损失赔偿：如果员工因故意或重大过失给工厂造成经济损失，工厂在符合法定程序的情况下，可以从员工工资中扣除赔偿金额，但每月扣除的部分不得超过员工当月工资的20%，且扣除后剩余工资不得低于当地月最低工资标准。
3. 劳动合同约定：依法签订的劳动合同中明确规定的减发工资情形，工厂可以按照合同约定执行。
4. 厂规厂纪规定：用人单位依法制定并经职代会批准的厂规、厂纪中明确规定的罚款处分等，工厂可以据此执行，但扣除金额需遵守国家规定的标准。
5. 其他合法情形：如企业经济效益下浮导致工资相应下浮，或员工因私请假等导致的工作时间减少等，工厂可以按照规定减发工资。

违法扣工资的情形：

1. 无规章制度依据扣钱：工厂没有制定明确的、合理合法的规章制度，或者没有与员工进行相关约定，就擅自以各种理由扣员工工资。
2. 未按法定程序扣钱：即使工厂有相关规章制度规定可以扣钱，但如果没有按照法定程序进行，如未提前告知员工、未给员工陈述和申辩的机会等。
3. 莫须有的理由扣减：劳动者无过错的情况下，工厂无故克扣工资。

违法扣工资的责任与维权途径：

如果工厂违法扣钱，你可以采取以下措施维护自己的合法权益：

1. 协商沟通：首先尝试与工厂进行协商沟通，寻求解决方案。
2. 投诉举报：如果协商无果，可以向当地劳动监察部门投诉举报工厂的违法行为。劳动监察部门会责令厂方限期支付，逾期不支付的，责令用人单位按应付金额百分之五十以上百分之一百以下的标准向劳动者加付赔偿金。
3. 劳动仲裁或诉讼：你还可以申请劳动仲裁或提起诉讼来维护自己的权益。在维权过程中，应保留相关证据以证明自己的主张。

综上所述，工厂克扣你的钱是否违法，需要根据具体情况来判断。如果你认为工厂克扣了你的工资且没有合法依据，你可以通过上述途径来维护自己的合法权益。如果你有任何疑问或需要进一步的法律帮助，请随时向我咨询。