核心结论：是否需要退钱，需根据转账的性质来判定，常见情况如下：

1. 若转账为借款：

   • 法律关系：大哥转账给你，若明确表示为借款（如聊天记录、借条等证据证明），则你们之间形成借贷法律关系。
   • 还款义务：你有义务按照约定的期限和方式归还借款。大哥要求退钱，即要求还款，你应当履行还款义务。
   • 建议：若确实为借款，建议与大哥协商还款计划，避免法律纠纷。

2. 若转账为赠与：

   • 法律关系：若大哥转账时明确表示为赠与（如口头或书面表示“这钱给你了，不用还”），或转账行为符合赠与的通常表现形式（如节日红包、特殊金额转账等），则你们之间形成赠与法律关系。
   • 撤销赠与：赠与合同成立后，除法定情形（如严重侵害赠与人或其近亲属、不履行扶养义务等）外，赠与人不得撤销赠与。若大哥要求退钱，即要求撤销赠与，除非符合法定撤销情形，否则你无需退还。
   • 建议：若认为转账为赠与，可收集相关证据（如聊天记录、转账备注等）证明赠与事实，以维护自身权益。

3. 若转账为不当得利：

   • 法律关系：若大哥转账给你，既非借款也非赠与，且你取得该款项无法律依据（如误转、多转等），则你构成不当得利。
   • 返还义务：根据法律规定，不当得利人应当返还取得的利益。大哥要求退钱，即要求返还不当得利，你应当履行返还义务。
   • 建议：若认为转账可能构成不当得利，建议与大哥核实转账原因，若确实为误转或多转，应及时返还。

4. 若转账涉及其他法律关系：

   • 如合伙投资、买卖合同等：若转账与这些法律关系相关，则需根据具体法律关系和合同约定来判断是否需要退钱。
   • 建议：若转账涉及复杂法律关系，建议收集相关证据（如合同、聊天记录等），并咨询专业律师以获取针对性法律建议。