如果买房不履行合同，卖方通常可以不退还定金。但这一结论并非绝对，需根据具体情况分析：

1. 购房者自身原因：若购房者因自身原因，如无故反悔不买房，导致合同无法订立或履行，按照定金规则，卖方有权不退还定金。这是因为定金本身就是为了保障合同履行而提前支付的钱款，若购房者违约，则丧失定金返还的请求权。

2. 卖方原因：若因卖方问题，如将房屋转售他人，导致合同无法履行，卖方则需双倍返还定金给购房者。这是卖方违约所应承担的法律责任。

3. 不可归责于双方的原因：若因不可归责于双方的情况，如政策变动导致购房者失去购房资格，双方可协商解除合同，此时卖方应退还定金。因为这种情况下，合同无法履行并非由任何一方违约所致，故定金应予退还。

综上所述，定金能否退还取决于合同无法履行的责任归属。若购房者违约，卖方通常可不退还定金；若卖方违约或存在不可归责于双方的原因，则定金应予退还或双倍返还。如有进一步疑问或需要具体法律帮助，请直接向我咨询。