结论前置：夫妻一方精神残疾，另一方不管不顾的行为可能构成违法，具体需根据实际情况判断是否构成遗弃罪或违反其他相关法律规定。
一、可能构成遗弃罪
法律背景：
- 根据《中华人民共和国刑法》第二百六十一条的规定，对于年老、年幼、患病或者其他没有独立生活能力的人，负有扶养义务而拒绝扶养，情节恶劣的，构成遗弃罪。
具体分析：
- 在夫妻关系中，双方互负扶养义务。当一方精神残疾，失去独立生活能力时，另一方有义务提供必要的生活照料和精神支持。
- 如果另一方拒绝履行扶养义务，且情节恶劣（如长期不闻不问、不提供生活费用、不照顾生活起居等），则可能构成遗弃罪。
法律后果：
- 构成遗弃罪的，依法可处五年以下有期徒刑、拘役或者管制。
二、可能违反其他相关法律规定
法律背景：
- 除了刑法中的遗弃罪外，夫妻一方不履行扶养义务还可能违反《中华人民共和国民法典》中关于婚姻家庭的相关规定。
具体分析：
- 根据《民法典》第一千零五十九条的规定，夫妻有相互扶养的义务。一方不履行扶养义务时，需要扶养的一方有要求其给付扶养费的权利。
- 如果精神残疾的一方因此遭受损失（如医疗费用、生活费用等），可以依法向法院提起诉讼，要求另一方承担扶养责任并赔偿损失。
法律后果：
- 法院会根据实际情况判决另一方承担相应的扶养责任，并可能要求其赔偿因不履行扶养义务而给精神残疾一方造成的损失。
三、建议与措施
收集证据：
- 精神残疾的一方或其家属应收集相关证据，如医疗记录、证人证言、照片或视频等，以证明另一方未履行扶养义务。
协商与调解：
- 在提起诉讼前，可以尝试与另一方进行协商或寻求第三方调解，以达成扶养协议或解决纠纷。
提起诉讼：
- 如果协商或调解无果，精神残疾的一方或其家属可以向法院提起诉讼，要求另一方承担扶养责任并赔偿损失。
寻求法律援助：
- 在整个过程中，如果遇到法律难题或需要专业指导，可以向我咨询，我会根据具体情况提供法律建议和帮助。
总结：夫妻一方精神残疾，另一方不管不顾的行为可能构成违法。在处理此类问题时，应首先收集证据，尝试协商或调解；如果无法解决，可以向法院提起诉讼并寻求法律援助。如果你有任何疑问或需要进一步的法律帮助，请随时向我咨询。