结论前置：
- 一般情况下，已支付的购房款不能随意要求返还，未支付的部分仍需按约定支付。
- 若双方未签订书面合同且对金额有争议，可通过协商、诉讼或仲裁解决。
详细分析：
一、合同形式与效力
根据《中华人民共和国民法典》的相关规定，当事人订立合同，可以采用书面形式、口头形式或者其他形式。虽然书面合同更为正式和具有证据力，但口头合同同样具有法律效力。在房屋买卖中，如果双方没有签订书面合同，但已经通过实际行动（如支付部分房款）表明了买卖的意图，那么可以认为双方之间存在事实上的合同关系。
关键点：
- 口头合同具有法律效力，但举证难度较大。
- 事实合同关系同样受法律保护。
二、已支付房款的处理
既然双方之间存在事实上的合同关系，且买方已经支付了部分房款，那么这部分房款通常被视为对合同的履行。在没有合法理由的情况下，买方不能随意要求返还这部分房款。
可能的情况：
- 如果买方能够证明支付房款是基于误解、欺诈或胁迫等合法理由，那么可以要求返还。
- 但这种情况需要充分的证据支持，且举证难度较大。
三、未支付房款的责任
对于未支付的部分房款，买方是否需要继续支付，取决于双方之间的约定以及合同的实际履行情况。
如果双方对金额有明确的口头约定：
- 买方应按照约定继续支付剩余房款。
- 如果买方拒绝支付，卖方有权通过法律途径追讨。
如果双方对金额没有明确的约定或存在争议：
- 双方应首先尝试通过协商解决争议。
- 如果协商不成，可以寻求第三方调解、仲裁或提起诉讼。
- 在此过程中，法院或仲裁机构会根据双方的实际履行情况、市场价格、交易习惯等因素来综合判断应支付的房款金额。
法律后果：
- 如果买方无正当理由拒绝支付剩余房款，可能构成违约，需要承担违约责任。
- 违约责任可能包括支付违约金、赔偿损失等。
四、建议与措施
收集证据：
- 买方应尽可能收集与房屋买卖相关的证据，如付款凭证、聊天记录、证人证言等。
- 这些证据将有助于证明双方之间的合同关系以及实际履行情况。
协商解决：
- 在争议发生后，双方应首先尝试通过协商解决争议。
- 协商可以更加灵活、高效地解决问题，避免不必要的法律纠纷。
寻求法律帮助：
- 如果协商不成，买方可以寻求专业律师的帮助。
- 律师将根据具体情况提供法律意见，并帮助买方制定合适的诉讼或仲裁策略。
最后，我想强调的是，在房屋买卖等重大交易中，签订书面合同是非常重要的。书面合同可以明确双方的权利和义务，避免不必要的争议和纠纷。如果您在房屋买卖过程中遇到任何法律问题，可以直接向我咨询，我将竭诚为您提供专业的法律帮助。