这种情况属于典型的“砍头息”或“高利贷”陷阱，你可能面临被债权人以借条上的金额追债的风险。针对你的问题，我们进行以下分析：

一. 实际借款与借条金额不符的法律风险

1. 借条的法律效力：根据《中华人民共和国民法典》的相关规定，借条是证明借贷关系存在的重要证据。在你的情况下，借条上金额为4万，这将成为债权人主张债权的主要依据。
2. 实际借款金额的认定：虽然你实际只借了2万，但如果没有其他证据（如转账记录、聊天记录等）来证明这一点，法院在判决时可能会倾向于认可借条上的金额。

二. 还款后未抽回借条的后果

1. 债权人的权利：由于借条仍在债权人手中，他有权依据借条向你主张4万的债权。即使你声称已经还款，但缺乏证据支持，你的主张可能难以被法院采纳。
2. 你的举证责任：在民事诉讼中，当事人需要对自己的主张承担举证责任。你声称只借了2万且已经还款，但需要提供相应的证据来支持这一主张。

三. 应对策略

1. 收集证据：首先，你需要尽可能收集所有与借款、还款相关的证据，如转账记录、聊天记录、通话录音等。这些证据将有助于证明你的实际借款金额和还款情况。
2. 与债权人协商：尝试与债权人进行沟通，说明实际情况，并寻求解决方案。如果可能，可以协商重新签订一份反映实际借款金额的借条。
3. 法律途径：如果协商无果，你可能需要通过法律途径来维护自己的权益。在这种情况下，建议咨询专业律师（即我），以便更准确地了解你的法律地位和应对策略。

我建议：尽快收集证据，并与债权人协商。如果协商无果，考虑通过法律途径来解决问题。同时，也要提醒你，在未来的借贷关系中，务必确保借条上的金额与实际借款金额相符，并保留好所有相关的证据。如有进一步需要，您可以继续咨询我。