结论前置：在您描述的这种情况下，是否需要承担责任，主要取决于双方是否已经就房屋买卖达成了书面合同，以及合同中是否约定了相关违约责任。以下分情况详细说明：

1. 未签订书面合同，仅口头约定

   • 法律背景：根据《民法典》的相关规定，当事人订立合同，可以采用书面形式、口头形式或者其他形式。然而，在涉及大额交易如房屋买卖时，口头约定往往因缺乏证据支持而难以维护双方权益。
   • 可能后果：若双方仅口头约定购房事宜，且未签订书面合同，一旦一方反悔，另一方很难通过法律途径追究其责任。因为口头约定在法律上难以证明，且缺乏明确的违约责任条款。
   • 建议：在房屋买卖等大额交易中，务必签订书面合同，并明确约定双方的权利义务及违约责任，以保障自身权益。

2. 已签订书面合同，但合同中未约定违约责任

   • 法律背景：即使双方签订了书面合同，但如果合同中未明确约定违约责任，那么在一方违约时，另一方可能难以直接依据合同条款追究其责任。不过，根据《民法典》的相关规定，当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。
   • 可能后果：在此情况下，若您作为买方反悔不买，房主可能无法直接依据合同条款要求您承担违约责任，但可能通过法律途径要求您赔偿其因此遭受的损失（如房屋空置期间的租金损失、重新出售房屋的差价损失等）。
   • 建议：在签订合同时，务必明确约定违约责任条款，以便在发生纠纷时能够有据可依。

3. 已签订书面合同，且合同中约定了违约责任

   • 法律背景：若双方已签订书面合同，并且合同中明确约定了违约责任条款，那么在一方违约时，另一方有权依据合同条款要求其承担违约责任。
   • 可能后果：在此情况下，若您作为买方反悔不买，且合同中约定了买方违约需承担的违约责任（如支付违约金、赔偿损失等），那么您可能需要按照合同约定承担相应的责任。
   • 建议：在签订合同时，务必仔细阅读合同条款，特别是违约责任条款，确保自己能够接受并愿意承担相应的责任。同时，在履行合同过程中，务必遵守合同约定，避免违约行为的发生。

额外提醒：无论是否签订书面合同，以及合同中是否约定了违约责任，双方都应该尽量通过友好协商的方式解决纠纷。如果协商不成，可以寻求法律途径解决，但务必保留好相关证据（如聊天记录、转账记录、书面合同等），以便在法律程序中维护自己的权益。

后续行动建议：如果您现在面临这样的情况，我建议您首先回顾一下与房主之间的约定和沟通记录，看看是否有书面合同以及合同中的具体条款。然后，您可以与房主进行友好协商，看是否能够达成一个双方都能接受的解决方案。如果协商不成，您可以考虑咨询专业律师（即向我咨询），以便更好地了解自己的法律权益和可能的法律后果。