结论前置：在房屋买卖合同无效的情况下，通常需要退房并退还钱款，以恢复双方到合同订立前的财产状态。不过，具体能否不退房而仅要求对方退钱，需根据合同无效的原因、双方过错程度以及实际情况综合判断。

一、房屋买卖合同无效的法律后果

房屋买卖合同一旦被认定为无效，该合同自始没有法律约束力，双方基于该合同所产生的权利义务视为从未存在。根据《中华人民共和国民法典》第一百五十七条的规定，民事法律行为无效、被撤销或者确定不发生效力后，行为人因该行为取得的财产，应当予以返还；不能返还或者没有必要返还的，应当折价补偿。有过错的一方应当赔偿对方由此所受到的损失；各方都有过错的，应当各自承担相应的责任。

二、能否不退房而仅要求对方退钱的分析

1. 合同无效的原因

   • 开发商原因：若合同无效是由于开发商的过错，如未取得预售许可证明即与购房者签订合同，或者房屋存在产权问题等，购房者不仅可要求退房、收回已付购房款及利息，还可要求开发商承担赔偿责任。在此情况下，购房者通常不能仅要求退钱而不退房，因为退房并退还钱款是恢复双方财产状态的基本要求。
   • 购房者原因：若合同无效是由于购房者的过错，如提供虚假信息或隐瞒重要事实等，购房者可能面临无法要求退房或仅能部分退款的情形。不过，这并不意味着购房者可以完全不退房而仅要求退钱，具体还需根据双方过错程度和实际情况判断。
   • 双方均有过错：若合同无效是买卖双方共同过错所致，双方应根据各自过错程度分担责任。在此情况下，购房者仍需退房并退还钱款，但可能无法主张全部利息损失等，具体赔偿责任需根据过错比例确定。

2. 实际情况的考量

   • 房屋现状：如果房屋已经交付给购房者，且购房者已经进行了装修或入住等，退房可能会给购房者带来较大的损失。在此情况下，购房者可以尝试与开发商协商，看是否能够仅要求退钱而不退房，或者要求开发商给予一定的补偿。不过，这种协商的成功率可能较低，因为开发商通常希望恢复房屋的原始状态。
   • 双方协商：无论合同无效的原因是什么，双方都可以尝试通过协商来解决争议。如果双方能够达成一致意见，那么可以按照协商的结果来处理退房和退款事宜。不过，在协商过程中，购房者应注意保留好相关证据，以便在协商不成时能够维护自己的合法权益。

三、建议与流程

1. 发出书面通知

   • 购房者首先应向开发商发出书面通知，明确合同无效的原因，并要求退房、返还购房款及赔偿相关损失。在通知中，购房者应详细说明自己的诉求和理由，并附上相关证据材料。

2. 协商退款事宜

   • 与开发商协商具体的退款细节，包括退款时间、方式等。在协商过程中，购房者应保持冷静和理性，尽量与开发商达成一致意见。如果协商不成，购房者可以考虑采取其他法律措施来维护自己的权益。

3. 法律途径解决争议

   • 若协商不成，购房者可通过向人民法院提起诉讼的方式，请求法院确认合同无效，并判决开发商返还购房款、赔偿损失等。在诉讼过程中，购房者应提供充分的证据来证明自己的诉求和理由，并遵循法院的判决结果。

4. 注意事项

   • 购房者在处理此类问题时，应谨慎处理，避免采取过激行为或违法手段来维护自己的权益。
   • 购房者应保留好所有与购房相关的证据材料，如购房合同、付款凭证、房屋质量问题证明等，以便在协商或诉讼中维护自己的合法权益。

总结：在房屋买卖合同无效的情况下，通常需要退房并退还钱款以恢复双方到合同订立前的财产状态。不过，具体能否不退房而仅要求对方退钱，需根据合同无效的原因、双方过错程度以及实际情况综合判断。如果购房者面临此类问题，建议及时咨询专业律师（即我本人）的意见，以便更好地维护自己的合法权益。