针对你提出的问题，我们首先明确核心要点：你出售了房产但买方未支付购房款，买方在还贷几年后决定放弃房产，并要求你退还其已还的贷款。以下是我的详细分析：
核心结论
买方无权要求你退还其已还的贷款，因为买方未履行支付购房款的合同义务。
法律分析
合同义务：
- 买卖双方签订了房屋买卖合同，买方有义务按照合同约定支付购房款。
- 买方未支付购房款，即未履行其主要合同义务。
贷款关系：
- 买方选择贷款购房，与贷款机构建立了贷款合同关系。
- 买方还贷是履行其与贷款机构之间的贷款合同义务，与你无关。
买方放弃房产：
- 买方在还贷几年后决定放弃房产，是其自身行为，不影响你作为卖方的权益。
- 买方放弃房产后，房产仍归你所有，你无需退还买方任何款项。
买方要求退款的无理性：
- 买方未支付购房款，却要求你退还其已还的贷款，这在法律上是没有依据的。
- 买方的行为构成了违约，你作为卖方有权要求其承担违约责任。
法律建议
保留证据：
- 保留房屋买卖合同、贷款合同、买方还贷记录等相关证据。
- 这些证据将作为你维护自身权益的重要依据。
与买方沟通：
- 尝试与买方进行沟通，明确告知其无权要求退款，并解释相关法律依据。
- 若买方坚持无理要求，你可考虑通过法律途径解决纠纷。
法律途径：
- 若无法通过沟通解决纠纷，你可向法院提起诉讼，要求买方承担违约责任。
- 在诉讼过程中，你将需要提供充分的证据来支持你的主张。
综上所述，买方无权要求你退还其已还的贷款。你应保留相关证据，与买方进行沟通，并在必要时通过法律途径维护自身权益。如有其他问题或需要进一步的法律帮助，请直接向我咨询。