智力残疾者是否要负刑事责任，需根据其犯罪时的刑事责任能力状态来确定，具体分为以下三种情况：
完全刑事责任能力：
- 如果智力残疾程度较轻，且经法定程序鉴定确认，在犯罪时精神状态正常，具备完整的辨认和控制自己行为的能力，那么智力残疾者需像正常人一样承担完全的刑事责任。例如，一个轻度智力障碍者，在犯罪时能够清晰理解自己行为的性质和后果，那么他就需要为自己的行为承担相应的法律责任。
限制刑事责任能力：
- 如果智力残疾导致行为人在犯罪时辨认或控制自己行为的能力有所减弱，但并未完全丧失，那么此类限制刑事责任能力的智力残疾者应负刑事责任，但法律允许从轻或减轻处罚。这适用于那些在日常生活中能进行基本活动，但在复杂情况或外界诱惑下辨别是非和控制行为能力较弱的个体。比如，一个中度智力障碍者，在犯罪时对行为有一定的辨认和控制能力，但这种能力相对较弱，那么他在承担刑事责任时，可能会得到从轻或减轻处罚的考虑。
无刑事责任能力：
- 如果智力残疾程度极为严重，经法定程序鉴定，在犯罪时完全不能辨认或控制自己的行为，那么此类智力残疾者被视为无刑事责任能力人，不负刑事责任。但需责令家属或监护人严加看管和医疗，必要时由政府实施强制医疗措施。例如，一个重度智力障碍者，在犯罪时无法理解自己行为的性质和后果，也无法控制自己的行为，那么他就不需要为自己的行为承担刑事责任，但需要接受相应的看管和医疗措施。
关键要素说明：
- 智力残疾定义：智力残疾是指大脑受到器质性损害或脑发育不完全导致的认识活动持续障碍及整个心理活动的障碍。这种障碍可能影响个体的辨认和控制自己行为的能力。
- 司法精神病鉴定：是判断智力残疾者犯罪时精神状态和刑事责任能力的关键依据。通过专业的司法鉴定，可以准确评估智力残疾者的刑事责任能力状态，确保司法公正和准确。
- 法律责任：即使是无刑事责任能力的智力残疾者，也并非可以随意犯罪而不受约束。社会和政府会采取相应措施，如责令家属或监护人严加看管和医疗，必要时由政府实施强制医疗措施，以确保其不对社会造成危害。
综合考量与建议：
在处理涉及智力残疾者的刑事案件时，必须综合考虑被告人的智力状况、行为时的具体情况以及法律的相关规定。通过专业的司法鉴定和细致的案情分析，才能做出既符合法律精神又体现人文关怀的公正判断。如果你或你身边的人遇到涉及智力残疾者的刑事案件问题，可以直接向我咨询，我会根据具体情况为你提供专业的法律建议和帮助。