不可以直接拿你的工资去抵非法集资的债。下面我详细解释一下：

首先，非法集资是违法行为，其产生的债权债务关系不受法律保护。因此，如果有人试图通过非法手段，如直接扣除你的工资来抵偿非法集资的债务，这是不合法的。

其次，你的工资是你的合法收入，受到法律的保护。任何单位或个人都无权擅自扣除或挪用你的工资，除非有合法的依据，如法院的判决、裁定或执行通知等。

最后，如果你面临这样的情况，建议你采取以下措施：

1. 明确拒绝：向试图扣除你工资的人或单位明确表示，你不同意这样的做法，并指出这是违法的。
2. 寻求法律帮助：如果你无法阻止他们扣除你的工资，或者担心自己的权益受到进一步侵害，可以寻求专业的法律援助，比如向我咨询相关法律问题。
3. 保留证据：保留所有与这件事相关的证据，如工资条、银行流水、沟通记录等，以便在需要时维护自己的权益。

总之，非法集资的债务不能通过非法手段来追讨，你的工资也不能被擅自扣除。如果你遇到这样的问题，应该坚决维护自己的合法权益。