核心结论：您描述的情况涉及农村宅基地买卖合同效力及后续处理问题，需分情况处理。以下是具体分析：

1. 合同效力问题

根据《土地管理法》第六十二条及《民法典》相关规定，农村宅基地使用权仅限本集体经济组织成员享有，非本村村民购买宅基地的行为原则上无效。若您非该村集体成员，则您与卖方签订的宅基地买卖合同可能因违反法律强制性规定而被认定无效。

2. 合同无效后的处理原则

若合同被确认无效，根据《民法典》第一百五十七条，双方应相互返还财产：

• 您作为买方：有权要求卖方返还已支付的2万元购房款；
• 卖方作为出卖人：有权要求您返还宅基地及地上附着物（如已建房屋）。若房屋已存在，可能涉及折价补偿问题。

3. 关键争议点：卖方拒不退款的处理

若卖方拒绝退款，您可通过以下途径维权：

（1）协商解决

• 优先与卖方沟通，明确合同无效的法律后果，要求其返还购房款；
• 可提出折中方案（如分期返还），降低冲突风险。

（2）诉讼途径

• 起诉条件：需准备购房合同、付款凭证、沟通记录等证据，证明交易事实及卖方违约行为；
• 诉讼请求：主张合同无效，要求卖方返还2万元及利息（若约定）；
• 风险提示：若房屋已由您翻建或增值，卖方可能主张您赔偿其信赖利益损失（如宅基地增值部分），需提前评估风险。

（3）行政投诉（辅助手段）

• 若卖方存在欺诈、胁迫等行为，可向当地村委会、乡镇政府或国土部门反映，请求协调处理。

4. 特殊情形：您是否为本村集体成员？

• 若您是本村成员：合同可能有效，但需符合“一户一宅”原则。若卖方未履行交付义务，可直接起诉要求继续履行合同或解除合同并退款；
• 若您非本村成员：合同无效风险较高，需重点围绕退款及损失赔偿展开维权。

5. 建议行动步骤

1. 收集证据：整理购房合同、付款记录、沟通记录、宅基地现状照片等；
2. 咨询律师：携带证据材料，由律师分析合同效力及诉讼策略；
3. 发送律师函：通过律师向卖方正式发函，明确法律后果，督促其退款；
4. 提起诉讼：若协商无果，及时向法院起诉，避免超过诉讼时效（3年）。

温馨提示：农村宅基地交易涉及复杂法律问题，建议尽快行动以固定证据。若需进一步帮助，可直接向我提供合同细节及证据材料，我将为您制定具体方案。