结论：您将钱存到哥哥名下，即使您拿着存单，哥哥在特定情况下仍有可能凭借他的身份证将钱取走，但具体能否取走取决于多种因素。
分析：
存单金额与是否到期：
- 对于未到期且金额较小的存单（具体标准因银行而异，一般5万元以下），若存单未设置密码或您已知晓密码，且银行审核无误，哥哥作为存单名义上的所有人，携带存单和他的身份证，通常可以支取现金。
- 若存单金额较大（一般5万元及以上）或已到期但支取金额超过一定额度，银行出于资金安全考虑，可能会要求存款人本人（即您哥哥）亲自办理支取，或在特殊情况下（如重病、行动不便等）提供相关证明并按银行规定的特殊流程办理委托支取。但在此情况下，若哥哥能提供充分证明并符合银行要求，他仍有可能取走款项。
是否为合法所有人或获得授权：
- 哥哥作为存单的名义所有人，本身具有支取存单上款项的权利。但若您能证明该款项实际为您所有，且哥哥未经您同意擅自支取，则哥哥的行为可能构成不当得利或侵犯您的财产权。然而，在银行层面，他们通常只认存单上的名义所有人和提供的身份证件，而不深入探究款项的实际归属。
- 若您希望哥哥在特定条件下才能支取款项，最好事先与哥哥签订书面协议，明确款项的归属和支取条件，并考虑将存单设置密码或采取其他安全措施。
银行规定差异：
- 不同银行对于代理取款的具体规定可能存在差异。有些银行可能要求更严格的身份验证或授权程序，而有些银行则可能相对宽松。因此，在哥哥尝试支取款项前，最好先联系存单所在银行，了解清楚其代理取款的详细要求和流程。
法律建议：
- 明确款项归属：若您希望确保款项的安全和归属，最好与哥哥签订书面协议，明确款项的实际所有人和支取条件。
- 设置安全措施：考虑将存单设置密码或采取其他安全措施，以增加哥哥擅自支取款项的难度。
- 咨询银行规定：在哥哥尝试支取款项前，先联系存单所在银行，了解清楚其代理取款的详细要求和流程，以便做好应对准备。
- 法律途径：若哥哥未经您同意擅自支取款项，且您能证明该款项实际为您所有，您可以考虑通过法律途径追究哥哥的责任，要求其返还款项并赔偿损失。
可能后果：
- 若哥哥擅自支取款项且您无法证明款项实际为您所有，您可能面临款项无法追回的风险。
- 若您能证明款项实际为您所有且哥哥未经您同意擅自支取，您可以通过法律途径追究哥哥的责任，但可能需要承担一定的诉讼成本和时间成本。
如有任何进一步疑问或需要法律帮助，请直接向我咨询。