结论：兄弟无民事行为能力时，您并非必须直接承担监护责任，但有义务协助或配合法定监护人履行监护职责。具体是否需要您直接管理，取决于您是否被指定为监护人。

详细分析：

1. 监护人的确定：

   • 根据《中华人民共和国民法典》的相关规定，无民事行为能力人的监护人首先由其配偶担任；没有配偶或者配偶没有监护能力的，由父母担任；父母没有监护能力的，由成年子女担任；若上述亲属均不存在或没有监护能力，则由其他愿意担任监护人的个人或者组织担任，但须经被监护人住所地的居民委员会、村民委员会或者民政部门同意。
   • 因此，在您兄弟无民事行为能力的情况下，其监护人应首先按照上述顺序确定，而非直接由您担任。

2. 您的义务：

   • 如果您未被指定为监护人，那么您没有直接的监护责任。但是，作为亲属，您有义务协助或配合法定监护人履行监护职责，如提供必要的帮助、支持或信息等。
   • 如果您被指定为监护人，那么您将承担全面的监护责任，包括照顾被监护人的生活、管理其财产、保护其人身权利等。

3. 特殊情况下的考虑：

   • 如果您兄弟的监护人因故无法履行监护职责，且没有其他合适的监护人可选，那么您可能会被考虑作为监护人。但这需要经过法定程序，如由居民委员会、村民委员会或者民政部门指定。
   • 在某些情况下，如果多个亲属都愿意担任监护人，且无法达成一致意见，那么可能需要通过法院来指定监护人。

4. 法律后果：

   • 如果您未被指定为监护人，但擅自干涉被监护人的事务或拒绝协助法定监护人，可能会面临法律责任，如被要求停止侵害、赔偿损失等。
   • 如果您被指定为监护人，但未履行监护职责或滥用监护权，同样会面临法律责任，包括被撤销监护人资格、赔偿损失等。

建议：

• 如果您兄弟确实无民事行为能力，且您关心其福祉，建议首先了解其监护人的情况，并主动与监护人沟通，提供必要的帮助和支持。
• 如果您认为自己有能力且愿意担任监护人，可以与相关亲属协商，并考虑通过法定程序来指定自己为监护人。
• 在任何情况下，都应尊重法律程序和规定，避免擅自行动或忽视法律责任。

如有任何疑问或需要进一步的法律帮助，请直接向我咨询。