诋毁您和您的家人是违法的，可能涉及多重法律责任。以下是对此问题的详细分析：
民事侵权责任：
- 诋毁行为若损害了您或您家人的名誉权等人格权益，即构成民事侵权。名誉权是公民依法享有的、对自己在社会生活中所获得的社会评价不受侵犯的权利。当有人通过造谣、污蔑等方式恶意中伤您或您的家人，导致社会评价降低时，您或您的家人有权要求侵权人停止侵害、恢复名誉、消除影响、赔礼道歉，并可主张赔偿损失，包括物质损失和精神损害抚慰金。
治安管理处罚：
- 根据《中华人民共和国治安管理处罚法》的相关规定，公然侮辱他人或捏造事实诽谤他人的，将面临五日以下拘留或五百元以下罚款的处罚；情节较重的，则处五日以上十日以下拘留，并可并处五百元以下罚款。这一规定体现了法律对公民名誉权的保护，以及对诋毁行为的严厉打击。
刑事责任：
- 在刑法领域，诋毁他人情节严重的，可能构成诽谤罪或侮辱罪。《中华人民共和国刑法》第二百四十六条明确规定，以暴力或其他方法公然侮辱他人或捏造事实诽谤他人，情节严重的，将受到三年以下有期徒刑、拘役、管制或剥夺政治权利的刑罚。这里的“情节严重”包括手段恶劣、内容恶毒、后果严重等情况，如当众实施极端侮辱行为，或导致被害人及其亲属精神失常、自杀等严重后果。此外，除非严重危害社会秩序和国家利益，否则此类犯罪需由被害人向人民法院告发，人民法院才受理，即“告诉的才处理”。
在判断诋毁行为是否违法及责任大小时，需综合考虑以下因素：
- 诋毁行为是否有事实依据：若诋毁内容完全虚构，无事实依据，则更可能构成违法。
- 造成的后果严重程度：包括对您或您家人的名誉损害程度、精神损害程度等。
- 行为的传播范围：诋毁行为若在网络等广泛传播的平台上进行，其影响范围更大，责任也可能更重。
建议：
- 若您或您的家人遭受诋毁，首先应保留相关证据，如聊天记录、录音、视频等。
- 您可以尝试与诋毁者沟通，要求其停止侵害并赔礼道歉。
- 若沟通无果，您可以向公安机关报案或向人民法院提起诉讼，要求侵权人承担相应的法律责任。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。