结论：客户经理因贷款逾期发短信称要联系您的单位，这一行为是否违规需分情况讨论，若未经您同意且非必要，可能涉嫌侵犯隐私权；若已获同意或为合法催收手段，则可能不违规。以下从不同角度详细分析：

一、从隐私权保护角度分析

1. 未经同意联系单位可能侵权
   根据《民法典》第1032条，自然人享有隐私权，任何组织或个人不得以刺探、侵扰、泄露、公开等方式侵害他人隐私。若客户经理在未经您明确同意的情况下，擅自将您的贷款逾期信息告知单位，可能构成对隐私权的侵犯。
   示例：若您未在贷款合同中授权银行联系单位，或未单独签署同意书，客户经理的行为可能违法。

2. 例外情形：合法催收手段
   若银行在贷款合同中明确约定“逾期后可通过联系单位等方式催收”，且您已签字确认，则客户经理的行为可能属于合法催收。但需注意，合同条款不得违反法律强制性规定（如《个人信息保护法》第13条对个人信息处理的合法性要求）。

二、从银行催收规范角度分析

1. 监管对催收行为的要求
   根据《商业银行信用卡业务监督管理办法》第68条，银行催收时不得对与债务无关的第三人进行催收。若单位并非您的担保人或共同借款人，客户经理联系单位可能违反该规定。
   例外：若单位是您的紧急联系人且您已授权，或银行为核实您的还款能力（如单位代发工资），可能不违规。

2. 内部合规要求
   多数银行内部规定催收时需遵循“必要限度”原则，即仅在无法联系您本人时，方可联系紧急联系人或单位。若客户经理未尝试联系您本人直接联系单位，可能违反银行内部合规流程。

三、从您的应对措施角度分析

1. 核实合同条款
   检查贷款合同中是否约定“银行可联系单位催收”，若未约定，客户经理的行为缺乏合同依据。

2. 要求银行提供依据
   若客户经理声称“合法催收”，可要求其提供书面依据（如合同条款、授权书）。若无法提供，可向银行投诉或向银保监会举报（电话：12378）。

3. 维权途径

   • 若确认侵权，可依据《民法典》第179条要求银行停止侵害、赔礼道歉，甚至赔偿损失（如因信息泄露导致名誉受损）。
     
   • 若银行违规催收，可向当地银保监局举报，要求对银行进行处罚。

四、特殊情形提示

• 单位性质影响：若您在国企、事业单位等对个人信用要求较高的单位工作，银行联系单位可能对您造成更大影响，此时更需谨慎维权。
  
• 逾期金额大小：若逾期金额较小，银行通常不会采取极端催收手段，可优先与银行协商还款计划，避免矛盾升级。

建议：

1. 立即联系客户经理，要求其停止联系单位，并明确告知“未经同意不得泄露个人信息”；
   
2. 书面投诉至银行客服部门，保留投诉记录；
   
3. 若银行未处理，可向银保监会或当地金融监管局举报。
   

如有进一步疑问（如合同条款解读、投诉信撰写等），可直接向我咨询，我会结合具体材料为您详细分析。