单位在处理公职人员对家人（弟弟）进行语言人身攻击的行为时，需结合公职人员管理规定、道德规范及具体情节，分情况采取相应措施，具体分析如下：

1. 若语言人身攻击行为发生在工作场所或与工作相关场景，且造成恶劣影响
   根据《中华人民共和国公职人员政务处分法》第四十条，公职人员若存在“违背社会公序良俗，在公共场所有不当行为，造成不良影响”的情形，单位可依据情节轻重给予警告、记过、记大过、降级、撤职或开除等政务处分。例如，若公职人员在单位内部对弟弟（如弟弟因工作原因在场）进行辱骂、侮辱，导致单位秩序混乱或损害单位形象，单位应启动调查程序，核实事实后依法依规处分。

2. 若行为发生在私人场合，但公职人员身份被利用或行为性质恶劣
   即使攻击行为发生在家庭内部等私人场景，若公职人员利用职务便利（如以权力威胁弟弟）或行为涉及暴力、侮辱、诽谤等违法情节（如构成《治安管理处罚法》第四十二条规定的“公然侮辱他人”），单位仍可依据《公职人员政务处分法》第四十一条，对“其他严重违反家庭美德、社会公德的行为”给予处分。此时需结合行为后果（如弟弟是否因此遭受精神损害、是否引发社会关注等）综合判断处分力度。

3. 若行为未达到违法程度，但违反单位内部纪律或道德规范
   单位可依据内部规章制度（如《公务员职业道德规范》《事业单位工作人员处分暂行规定》）对公职人员进行批评教育、责令书面检查、通报批评等处理。例如，若公职人员仅在家庭聚餐时对弟弟出言不逊，未造成严重后果，单位可要求其向弟弟道歉、参加道德培训或调整工作岗位，以起到警示作用。

补充说明：

• 单位处理时需遵循“事实清楚、证据确凿、定性准确、处理恰当、程序合法”的原则，确保程序公正（如调查取证、听取本人申辩、集体讨论决定等）。
  
• 若弟弟认为自身权益受损，可向单位纪检监察部门投诉，或通过民事诉讼主张名誉权、人格权侵权赔偿（需提供证据证明攻击行为存在及损害后果）。
  

建议：
若您是涉事公职人员或其家属，可进一步向我说明行为发生的具体场景（如是否在工作场所、是否涉及权力滥用、是否造成实际损害等），我将结合细节提供更精准的处理建议。