骚扰精神病人是违法的，可能涉及多种法律责任。下面我将从不同角度为你详细分析：
一、民事侵权责任
人格权保护：精神病人作为民事主体，同样享有人格权，包括名誉权、隐私权、人身自由权等。如果骚扰行为侵犯了这些权利，比如通过言语侮辱、恶意传播隐私信息等方式，就构成了对精神病人人格权的侵害。
赔偿责任：根据《中华人民共和国民法典》的相关规定，侵害他人人身权益造成财产损失的，按照被侵权人因此受到的损失或者侵权人因此获得的利益赔偿；被侵权人因此受到的损失以及侵权人因此获得的利益难以确定，被侵权人和侵权人就赔偿数额协商不一致，向人民法院提起诉讼的，由人民法院根据实际情况确定赔偿数额。如果骚扰行为给精神病人造成了精神损害，还可以要求精神损害赔偿。
二、行政责任
治安管理处罚：如果骚扰行为情节较轻，尚未构成犯罪，但违反了治安管理规定，比如公然侮辱他人或者捏造事实诽谤他人，根据《中华人民共和国治安管理处罚法》的相关规定，可能会受到警告、罚款或者行政拘留等处罚。
特殊保护：由于精神病人属于特殊群体，法律对其有更为严格的保护。如果骚扰行为针对精神病人，且情节恶劣，即使未构成犯罪，也可能面临更严厉的行政处罚。
三、刑事责任
犯罪构成：如果骚扰行为情节严重，构成了犯罪，比如侮辱罪、诽谤罪或者寻衅滋事罪等，根据《中华人民共和国刑法》的相关规定，可能会受到刑事处罚，包括有期徒刑、拘役或者管制等。
加重情节：对于针对精神病人的骚扰行为，如果情节特别恶劣，比如长期骚扰、多次骚扰或者造成严重后果等，可能会被视为加重情节，从而面临更严厉的刑事处罚。
法律建议
收集证据：如果遭遇骚扰，精神病人或其家属应尽可能收集相关证据，比如聊天记录、录音录像、证人证言等，以便在后续的法律程序中证明骚扰行为的存在和严重程度。
及时报警：如果骚扰行为情节严重或者持续发生，应及时向公安机关报警，以便公安机关及时介入调查并采取相应的措施。
寻求法律援助：如果骚扰行为给精神病人造成了较大的损害，可以寻求法律援助或者委托律师提起诉讼，以维护自己的合法权益。
总结来说，骚扰精神病人是违法的行为，可能涉及民事侵权责任、行政责任和刑事责任。 如果遭遇此类情况，建议及时收集证据、报警并寻求法律援助。如果你有任何具体的法律问题或者需要进一步的帮助，请随时向我咨询。