精神残疾是否限制去工厂工作，主要取决于残疾的具体程度以及工厂的工作性质和安全要求。
精神残疾程度：
- 轻度精神残疾：如果残疾程度较轻，不影响个人的认知、判断和行为控制能力，那么通常不会限制其去工厂工作。但具体还需根据工厂的工作性质和安全要求来判断。
- 重度精神残疾：如果残疾程度较重，严重影响个人的认知、判断和行为控制能力，那么可能会对其在工厂工作产生限制，因为这类工作可能需要较高的注意力、反应速度和协调能力。
工厂工作性质和安全要求：
- 某些工厂工作可能涉及机械操作、高温、高压等危险因素，对员工的认知、判断和行为控制能力有较高要求。在这种情况下，如果精神残疾员工的残疾程度影响到这些能力，那么工厂可能会出于安全考虑，限制其从事这些工作。
- 另一些工厂工作可能相对简单、安全，对员工的认知、判断和行为控制能力要求较低。在这种情况下，即使员工有轻度精神残疾，也可能不会受到限制。
综上所述，精神残疾是否限制去工厂工作并没有一个绝对的答案。具体还需根据残疾员工的残疾程度、工厂的工作性质和安全要求以及相关法律法规来综合判断。如果你或你身边的人有此类问题，建议直接咨询相关工厂的人事部门或安全负责人，以获取更具体的指导和建议。同时，也可以咨询专业的劳动法律师，以了解相关的法律权益和保护措施。