核心结论：贷款签了居间合同不想办理了，违约金的赔偿数额需根据合同具体约定、实际损失情况以及公平原则综合确定，可能存在以下几种情况：

1. 合同有明确约定
   若居间合同中明确约定了违约情形下的违约金数额或计算方式（如按贷款金额的百分比计算），且该约定不违反法律强制性规定（如违约金过高可请求法院调整），则违约方需按合同约定支付违约金。
   法律依据：《民法典》第五百八十五条：“当事人可以约定一方违约时应当根据违约情况向对方支付一定数额的违约金，也可以约定因违约产生的损失赔偿额的计算方法。”

2. 合同未约定或约定不明
   若合同未约定违约金或约定不明确，违约方需赔偿守约方因违约造成的实际损失（如居间方已产生的合理费用、预期利益损失等）。实际损失需由守约方举证证明，且不得超过违约方订立合同时预见到或应当预见到的损失范围。
   法律依据：《民法典》第五百八十四条：“当事人一方不履行合同义务或者履行合同义务不符合约定，造成对方损失的，损失赔偿额应当相当于因违约所造成的损失，包括合同履行后可以获得的利益；但是，不得超过违约一方订立合同时预见到或者应当预见到的因违约可能造成的损失。”

3. 违约金过高或过低的调整
   若合同约定的违约金显著高于实际损失（如超过损失的30%），违约方可请求法院或仲裁机构予以减少；若违约金低于实际损失，守约方可请求增加。法院会以实际损失为基础，兼顾合同履行情况、当事人过错程度等因素综合判定。
   法律依据：《民法典》第五百八十五条第二款：“约定的违约金低于造成的损失的，人民法院或者仲裁机构可以根据当事人的请求予以增加；约定的违约金过分高于造成的损失的，人民法院或者仲裁机构可以根据当事人的请求予以适当减少。”

实务建议：

1. 立即审查居间合同条款，重点关注违约金约定、违约责任承担方式等条款；
   
2. 评估自身违约原因及守约方实际损失（如居间方是否已提供服务、是否产生费用等）；
   
3. 若认为违约金过高，可与对方协商调整，或通过法律途径申请减额；
   
4. 若对方主张的损失缺乏依据，可要求其提供证据并拒绝不合理赔偿要求。
   

风险提示：
若未协商一致擅自违约，可能面临对方起诉要求支付违约金或赔偿损失，甚至影响个人征信（如贷款合同已部分履行）。建议谨慎处理，必要时委托律师介入谈判或诉讼。