结论前置：保险赔偿金是否可以不分给兄弟，需根据保险类型、受益人指定情况以及是否存在特殊法律情形来综合判断。以下分情况详细说明：

1. 若保险为个人人身保险，且已明确指定受益人
   根据《保险法》第十八条，人身保险的受益人由被保险人或投保人指定，且保险金不属于被保险人的遗产（除非未指定受益人或受益人先于被保险人死亡）。因此：

   • 若您是投保人且为自己购买人身保险（如寿险、重疾险），并明确指定自己或配偶、子女为受益人，则保险金直接归受益人所有，无需分配给兄弟。
     
   • 若未指定受益人，保险金将作为遗产处理，此时需按《民法典》继承编的规定分配，兄弟可能作为第二顺序继承人参与分配（若第一顺序继承人不存在）。

2. 若保险为财产保险（如车险、家财险）
   财产保险的赔偿金用于补偿被保险人的财产损失，属于被保险人个人财产。无论是否指定受益人，赔偿金均归被保险人所有，兄弟无权要求分配。

3. 特殊情形：保险金被认定为遗产时的分配规则
   若保险金因未指定受益人或受益人丧失资格而成为遗产，需按《民法典》第一千一百二十七条规定的继承顺序分配：

   • 第一顺序继承人：配偶、子女、父母；
     
   • 第二顺序继承人：兄弟姐妹、祖父母、外祖父母。
     关键点：兄弟仅在无第一顺序继承人时才有权继承，且继承份额需与其他第二顺序继承人均分。

4. 实务建议

   • 明确指定受益人：购买人身保险时，建议通过书面形式指定受益人（可多选），避免保险金成为遗产引发纠纷。
     
   • 保留证据：若兄弟主张分配保险金，需提供保险合同、受益人指定文件等证据证明其无权分配。
     
   • 协商或诉讼：若发生争议，可先尝试协商；协商不成，可通过诉讼由法院根据具体情况判决。

总结：保险赔偿金是否分配给兄弟，核心取决于保险类型和受益人指定情况。若您已合理规划保险结构（如指定非兄弟为受益人），则无需分配；若未规划且保险金成为遗产，兄弟可能依法参与分配。如有具体案例或合同条款需要分析，可进一步向我提供细节。