结论：是否需要付给对方利息，这主要取决于你们之间的合同约定以及相关法律法规的规定。以下从不同角度为你详细分析：

1. 合同约定角度：

   • 如果在宅基地买卖合同中，你们双方明确约定了退款时需要支付利息，那么按照合同的约定，你弟弟作为退款方是需要支付利息给对方的。这是合同自由原则的体现，即合同双方有权根据自己的意愿约定合同的内容。
   • 如果合同中没有明确约定退款时需要支付利息，那么一般情况下，你弟弟是不需要支付利息的。因为利息通常不是宅基地买卖合同的必然组成部分，除非法律另有规定或者双方有特别约定。

2. 法律法规角度：

   • 根据《中华人民共和国民法典》等相关法律法规，利息的支付通常与借贷关系相关联。在宅基地买卖这种非借贷关系中，如果没有合同约定，法律一般不会强制要求支付利息。
   • 但是，如果因为退款行为给对方造成了实际损失（比如对方因为等待退款而错过了其他投资机会），且这种损失是可以合理预见的，那么根据公平原则和诚实信用原则，你弟弟可能需要承担一定的赔偿责任。不过，这种赔偿责任并不等同于支付利息，而是需要根据实际情况进行具体判断。

3. 实际操作建议：

   • 首先，建议你仔细审查宅基地买卖合同，看看其中是否有关于退款时支付利息的约定。
   • 其次，如果合同中没有约定，你可以与对方进行协商，看看是否能够达成一个双方都能接受的解决方案。
   • 最后，如果协商不成，且对方坚持要求支付利息，你可以建议对方通过法律途径解决争议。在这种情况下，法院会根据合同内容、相关法律法规以及实际情况进行综合判断，并作出公正的裁决。

总结与提醒：在处理宅基地买卖退款问题时，合同约定是至关重要的。因此，在签订合同时，一定要仔细阅读合同条款，确保自己的权益得到充分保障。如果遇到任何法律问题或困惑，可以直接向我咨询，我会根据你的具体情况提供专业的法律建议。