在交付意向金后，若买家决定不购买，其所需承担的责任主要取决于意向金的性质以及双方之间的合同约定。以下是对此问题的详细分析：

1. 意向金的性质：

   • 定金性质：如果意向金在合同中被明确约定为定金，并且符合定金的相关法律规定（如定金数额不超过主合同标的额的20%），那么当买家违约不购买时，根据《中华人民共和国民法典》第五百八十七条的规定，卖家有权不退还定金。这是因为定金具有担保合同履行的作用，买家违约即应承担定金罚则的后果。
   • 预付款性质：如果意向金仅被视为预付款或诚意金，并未明确约定为定金，那么当买家决定不购买时，卖家通常应退还意向金。因为预付款并不具有担保合同履行的功能，买家违约并不直接导致意向金的丧失。

2. 合同约定：

   • 明确约定：如果双方在合同中明确约定了买家违约时意向金的处理方式（如不退还、部分退还或全额退还等），那么应按照合同约定执行。合同是双方意思自治的体现，只要合同内容不违反法律、行政法规的强制性规定，就应得到尊重和执行。
   • 未明确约定：如果合同中未明确约定买家违约时意向金的处理方式，那么应根据意向金的性质以及相关法律法规的规定来判断。在缺乏明确约定的情况下，卖家通常难以直接扣留意向金，除非能证明买家违约给其造成了实际损失，并且该损失与意向金数额相当。

3. 实际损失与赔偿：

   • 即使意向金被退还，如果买家的违约行为给卖家造成了实际损失（如卖家因准备交易而产生的费用、错过其他交易机会等），卖家仍有权要求买家进行赔偿。赔偿的范围应以实际损失为限，并且需要卖家提供充分的证据来证明其损失的存在和数额。

建议：

• 对于买家而言，在交付意向金前应仔细阅读合同条款，明确意向金的性质以及违约时的处理方式。如果对合同条款有疑问或不确定的地方，应及时向卖家或专业律师咨询。
• 对于卖家而言，在收取意向金时应明确告知买家意向金的性质以及违约时的处理方式，并在合同中予以明确约定。同时，应保留好相关证据以证明买家的违约行为以及自身因此遭受的实际损失。

如有任何疑问或需要进一步的法律帮助，请直接向我咨询。