法院调解员在一般情况下直接打电话给家人是不合法的，但存在特定例外情形。以下从不同角度为你详细分析：
一、一般情况下的不合法性
隐私权保护：根据《中华人民共和国民法典》的相关规定，自然人的隐私权受法律保护。法院调解员在未经当事人同意的情况下，直接联系其家人，可能涉及侵犯当事人的隐私权。隐私权是公民的重要权利，包括个人信息的保密、个人生活的安宁等，调解员的行为若未经授权，则可能构成对这一权利的侵犯。
调解程序规范：法院调解应当遵循法定程序，包括尊重当事人的意愿、保护当事人的合法权益等。调解员在调解过程中，应当主要与当事人本人进行沟通，了解其诉求和意见，而不是直接联系其家人。除非在特定情况下，如当事人无法联系或存在其他紧急情况，且经过合法程序批准，否则调解员无权直接联系家人。
二、特定例外情形
当事人同意或授权：如果当事人在调解过程中明确同意或授权调解员联系其家人，以协助调解工作的进行，那么调解员的行为则是合法的。在这种情况下，调解员应当确保联系家人的行为符合当事人的意愿，并尊重家人的意见和感受。
紧急情况下的必要联系：在极少数情况下，如当事人因意外事件无法联系，且调解工作涉及紧急事项（如涉及当事人生命安全、重大财产权益等），调解员可能在经过合法程序批准后，联系当事人的家人以获取必要信息或协助调解。但这种情况应当严格限制，并确保符合法律法规的规定。
三、法律建议与后果
法律建议：如果你认为法院调解员的行为侵犯了你的隐私权或违反了调解程序规范，你可以向法院提出异议或投诉。法院将会对你的投诉进行调查，并根据调查结果采取相应的措施。同时，你也可以咨询专业律师，了解你的权利和义务，以及如何维护自己的合法权益。
可能的法律后果：如果调解员的行为确实违反了法律法规或调解程序规范，且给你造成了损害，你可能有权要求调解员或法院承担相应的法律责任。这包括但不限于赔偿损失、赔礼道歉等。
总结来说，法院调解员在未经当事人同意或授权的情况下，直接联系其家人是不合法的。但在特定例外情形下，如当事人同意或存在紧急情况，调解员可能经过合法程序批准后联系家人。如果你对调解员的行为有异议或投诉，可以向法院提出，并咨询专业律师以了解你的权利和义务。如果你有任何法律问题，都可以直接向我咨询，我会为你提供专业的法律意见和帮助。