结论：对方有神经病史，骂人“神经病”是否犯法，依然需依据具体情况及产生的后果来判断，神经病史并不影响对其骂人行为的法律定性。

详细分析如下：

1. 违反《治安管理处罚法》的可能性：

   • 如果对方在公共场合或有多人在场时，对你骂“神经病”，且此行为已经损害了你的名誉，那么根据《中华人民共和国治安管理处罚法》第四十二条第二项的规定，对方可能会面临五日以下拘留或五百元以下罚款的处罚；情节较重的，还可能面临五日以上十日以下拘留，并可并处五百元以下罚款。

2. 承担民事侵权责任的可能性：

   • 若骂人行为导致你的名誉受损，比如降低了你在他人心目中的形象和声誉，你可以根据《中华人民共和国民法典》第一千零二十四条的规定，要求对方承担民事责任。这包括但不限于停止侵害、恢复名誉、消除影响以及赔偿精神损害抚慰金。

3. 触犯刑法的可能性（虽较小但仍需注意）：

   • 在极少数情况下，如果骂人行为情节恶劣，比如导致你出现自杀、自残等严重后果，那么对方可能构成侮辱罪。依据《中华人民共和国刑法》第二百四十六条的规定，以暴力或其他方法公然侮辱他人，情节严重的，将处以三年以下有期徒刑、拘役、管制或剥夺政治权利。不过，这种情况相对较为罕见，且需要满足一定的条件。

4. 特殊群体的保护（虽不直接相关但仍需知晓）：

   • 虽然这个问题不直接涉及特殊群体的保护，但值得注意的是，如果骂人内容涉及歧视、侮辱特定群体（如残疾人、老年人等），还可能违反其他相关法律。因此，在言辞上应尽量避免对任何群体进行歧视或侮辱。

建议与总结：

• 面对对方的辱骂行为，你首先应保持冷静，避免与对方发生进一步的冲突。
• 如果可能的话，尽量收集相关证据，如录音、视频或目击者证言等，以便在必要时提供法律支持。
• 你可以先尝试与对方进行沟通，要求其停止辱骂行为并赔礼道歉。如果沟通无果，你可以考虑向相关部门（如公安机关、社区调解组织等）寻求帮助。
• 在整个过程中，如果你感到自己的权益受到了严重侵害，或者不确定如何应对对方的辱骂行为，都可以随时向我咨询。我会根据你的具体情况，为你提供更详细、更专业的法律建议。

总之，无论对方是否有神经病史，辱骂他人都是不文明且可能违法的行为。我们应尊重他人的尊严和权利，避免使用侮辱性语言进行交流。