您不能直接拿您哥哥的银行卡去银行取钱。在处理此类情况时，需要遵循一定的法律程序和规定，以确保合法性和避免潜在的纠纷。以下是对您问题的详细分析：

一. 确认继承人身份

• 根据《中华人民共和国民法典》第一千一百二十七条，遗产继承有明确的顺序规定。在家人过世后，首先需要明确合法的继承人身份。第一顺序继承人为配偶、子女、父母；第二顺序为兄弟姐妹、祖父母、外祖父母。继承开始后，由第一顺序继承人继承，第二顺序继承人不继承；没有第一顺序继承人继承的，由第二顺序继承人继承。

二. 办理继承权证明或法院裁判

• 若知道密码且账户未注销：您可以携带死者的身份证、死亡证明、自己的身份证以及遗嘱（如有）到银行尝试取款。但请注意，银行可能会要求更严格的身份验证。
• 若不知道密码或银行卡丢失、损坏：您需要向储蓄机构所在地的公证处申办继承权证明书。根据相关规定，存款人死亡后，合法继承人为证明自己的身份和有权提取该项存款，应向公证处申请办理继承权证明书，储蓄机构凭此办理过户或支付手续。若继承权发生争执，应由人民法院判处，储蓄机构凭人民法院的判决书、裁定书或调解书办理过户或支付手续。

三. 提取存款

• 在取得继承权证明书或法院裁判后，您可以携带相关证件（如身份证、继承权证明书、法院裁判书等）到银行办理提款手续。银行会根据相关规定和程序，为您办理存款的提取和过户手续。

我的观点：在处理此类敏感且复杂的财务事务时，务必遵循法律程序和银行规定，以确保您的权益得到保障，并避免潜在的法律风险。如有进一步需要，您可以继续咨询我。