不去军工厂干活并不违法。

从法律的角度来看，劳动是公民的权利，也是公民的义务，但并不意味着公民必须去特定的单位或工厂工作。军工厂作为用工单位，与劳动者之间建立劳动关系需要基于双方的自愿和协商一致。如果劳动者不愿意去军工厂工作，或者没有与军工厂签订劳动合同，那么不去军工厂干活并不构成违法行为。

当然，如果劳动者已经与军工厂签订了劳动合同，并且合同中有明确约定劳动者必须去军工厂工作，那么劳动者就需要按照合同的约定履行自己的义务。如果无故不去工作，可能会构成违约，需要承担相应的法律责任。但这种情况下的法律责任是基于合同的约定，而不是基于法律对劳动义务的直接规定。

总的来说，不去军工厂干活并不违法，但劳动者在行使自己的劳动权利时，也需要考虑到与用工单位之间的合同关系，以及可能产生的法律后果。如果有任何疑问或需要进一步的法律帮助，请随时向我咨询。