核心结论：针对您未签合同但私下收取20万押金且拒不退还的情况，您可能面临对方通过法律途径追讨押金、要求赔偿损失甚至追究刑事责任的风险。以下从民事、刑事两个角度为您详细分析：

一、民事法律责任

1. 押金性质与返还义务
   即使未签订书面合同，若您与对方存在事实上的合同关系（如口头约定、实际履行行为等），您收取的20万押金可能被认定为“履约保证金”或“预付款”。根据《民法典》第587条，若您无正当理由拒不返还押金，对方有权要求您返还，并可能主张因您违约造成的损失（如资金占用利息、维权费用等）。

2. 举证责任与诉讼风险
   对方需证明押金支付事实（如转账记录、聊天记录、证人证言等）及您拒不返还的行为。若对方证据充分，法院可能判决您返还押金并支付利息（通常按LPR计算）。若您主张押金已抵扣费用或对方违约，需承担举证责任，否则可能败诉。

3. 建议行动

   • 协商解决：主动与对方沟通，明确押金性质及退还条件（如扣除合理费用后返还剩余部分），避免矛盾升级。
     
   • 固定证据：若协商无果，整理您收取押金的依据（如对方同意支付的聊天记录、行业惯例等）及押金用途说明，以备诉讼或反诉。
     
   • 反诉主张：若对方存在违约行为，您可反诉要求其赔偿损失，但需提供充分证据（如合同履行记录、损失计算依据等）。

二、刑事法律风险（若情节严重）

1. 侵占罪构成要件
   根据《刑法》第270条，若您将代为保管的他人财物非法占为己有，数额较大（20万已远超“数额较大”标准，通常为1万元以上）且拒不退还，可能构成侵占罪。需注意：

   • 押金需属于“代为保管的财物”（如对方基于合同关系交付，您无合法所有权）；
     
   • 您需以“非法占有为目的”（如明知无权占有仍拒不返还）。

2. 刑事追责程序
   侵占罪属于“告诉才处理”的案件，即对方需自行向法院提起刑事自诉（而非公安机关立案）。若法院认定您构成犯罪，可能面临“二年以下有期徒刑、拘役或罚金”的刑罚。

3. 风险防范建议

   • 立即返还押金：若您无合法理由占有押金，主动返还可避免刑事风险。
     
   • 协商和解：与对方达成和解协议（如分期返还、赔偿损失等），争取对方撤诉。
     
   • 咨询专业律师：若对方已威胁刑事报案，需尽快委托律师评估证据、制定辩护策略。

总结：未签合同不免除您的返还义务，拒不退还押金可能面临民事诉讼或刑事追责。建议您优先通过协商解决，若无法达成一致，需及时固定证据并咨询律师，以合法途径维护权益或应对风险。如有进一步问题，可直接向我提问。