结论：受托人是否需要赔付违约金给买家，这主要取决于房东的口头委托是否构成有效的授权，以及受托人是否在授权范围内行事，同时还需要考虑合同的具体条款和实际情况。以下从几个方面进行详细分析：
口头委托的效力：
- 在法律上，口头委托是可能具有法律效力的，但其证明难度相对较大。如果房东确实口头委托了他人代为签订房屋买卖合同，并且这一委托行为能够被充分证据所证明（如证人证言、录音录像等），那么该口头委托可能被视为有效。
- 然而，由于口头委托的易变性和难以证明性，如果房东事后否认委托，而受托人又无法提供充分证据证明委托的存在，那么受托人可能会面临法律风险。
受托人的行为是否在授权范围内：
- 即使口头委托被认定为有效，受托人也必须在授权范围内行事。如果受托人超越了房东的授权范围，例如擅自提高了房价或改变了交易条件，那么受托人可能需要对自己的行为负责。
- 在本案例中，如果受托人是在房东的明确授权下签订买卖合同，并且没有超越授权范围，那么当房东反悔不卖房时，受托人通常不需要直接赔付违约金给买家。但受托人可能需要协助买家追究房东的违约责任。
合同的具体条款：
- 房屋买卖合同中通常会包含关于违约责任的条款。如果合同中明确规定了房东或受托人在违约时应承担的责任，那么这一条款将作为判断责任归属的重要依据。
- 如果合同中没有明确规定或规定不明确，那么将需要根据相关法律法规和实际情况进行综合判断。
实际损失和过错程度：
- 在确定责任归属时，还需要考虑买家的实际损失和各方的过错程度。如果买家因为房东的反悔而遭受了实际损失，并且这一损失是由于房东或受托人的过错造成的，那么过错方可能需要承担相应的赔偿责任。
法律建议：
- 对于买家而言，如果遇到房东口头委托他人签订买卖合同后反悔不卖房的情况，首先应当尝试与房东和受托人进行协商，寻求解决方案。
- 如果协商无果，买家可以考虑通过法律途径追究房东的违约责任。在此过程中，买家需要收集并保存好相关证据，如合同、委托证明、沟通记录等。
- 对于受托人而言，如果房东的口头委托被认定为有效且受托人未超越授权范围行事，那么受托人通常不需要直接赔付违约金给买家。但受托人应当积极协助买家追究房东的责任，并保护自己的合法权益。
可能后果：
- 如果房东被认定为违约方，那么房东可能需要承担违约责任，包括赔付违约金、赔偿买家实际损失等。
- 如果受托人被认定为有过错方（如超越授权范围行事），那么受托人也可能需要承担相应的赔偿责任。
如有更多细节或疑问，可以直接向我咨询，我会根据你的具体情况提供更详细的法律建议。