违规借调的处理方式需根据具体情形和主体身份来综合判断，以下是详细分析：

1. 若借调行为违反单位内部规章制度
   若借调未按照单位规定的程序（如未签订书面借调协议、未报上级审批等），首先应由单位内部通过行政手段纠正。例如：

   • 要求借调方立即停止违规行为，归还被借调人员；
     
   • 对相关责任人（如直接安排借调的领导）进行内部处分（如警告、扣绩效等）；
     
   • 若因违规借调导致被借调人员权益受损（如未支付工资、未缴纳社保），单位需承担补发工资、补缴社保等责任。

2. 若借调行为违反法律法规（如公务员法、事业单位人事管理条例等）

   • 对单位的处理：相关主管部门可责令限期改正，对直接负责的主管人员和其他直接责任人员依法给予处分（如警告、记过、降级等）。例如，《公务员法》明确规定公务员借调需经批准，违规借调可能面临行政处分。
     
   • 对个人的处理：若被借调人员通过违规借调获得不当利益（如额外补贴、晋升机会），可能需退还非法所得，甚至影响个人职务晋升或评优资格。
     
   • 劳动权益保障：若被借调人员与原单位劳动关系未解除，借调期间原单位仍需承担工资支付、社保缴纳等义务；若借调单位实际使用人员却未履行义务，被借调人员可向劳动监察部门投诉或申请劳动仲裁。

3. 若借调行为涉及利益输送或腐败
   若违规借调背后存在权钱交易、利益交换等腐败行为，可能触犯《刑法》中的贪污贿赂罪（如受贿罪、行贿罪）或滥用职权罪。此时需由纪检监察机关或司法机关介入调查，依法追究刑事责任。

温馨提示：

• 若您是单位管理人员，建议立即审查借调程序是否合规，及时补办手续或终止违规借调；
  
• 若您是被借调人员，可要求单位出具书面借调协议，明确借调期限、待遇等条款，保障自身权益；
  
• 若发现借调行为涉嫌违法违纪，可向单位纪委、上级主管部门或监察委员会举报。
  

如有具体案例或细节需要进一步分析，欢迎随时向我咨询。