可以告他，但具体能否构成违法或犯罪行为，需根据实际情况判断。以下从不同角度为你详细分析：
一、从民事法律关系角度
如果兄弟强迫哥哥借钱，且这种强迫行为并未造成哥哥身体上的伤害，但可能涉及到了对哥哥意志自由的侵犯，在民事法律关系上，这主要涉及到的是意思表示的真实性问题。
意思表示不真实：在民法中，合同或其他民事法律行为的成立，要求当事人的意思表示真实。如果哥哥是在被强迫的情况下“同意”借钱，那么这种“同意”并非其真实意思表示，该借款行为可能因意思表示不真实而存在瑕疵。
民事行为效力：根据《民法典》的相关规定，因胁迫实施的民事法律行为，受胁迫方有权请求人民法院或者仲裁机构予以撤销。因此，哥哥有权在法定期间内请求撤销该借款行为，使借款合同自始不发生法律效力。
二、从刑事法律关系角度
如果兄弟的强迫行为超出了民事纠纷的范畴，涉及到了对哥哥的人身自由或身体健康的侵害，那么可能构成刑事犯罪。
强迫交易罪：虽然此罪名通常用于商业交易中的强迫行为，但如果兄弟以暴力、威胁手段强迫哥哥借钱，且这种行为具有交易性质（如强迫哥哥以不合理的条件借款），在特定情况下可能触犯此罪。但需注意，此罪名的适用需严格符合其构成要件。
非法拘禁罪或故意伤害罪：如果兄弟在强迫哥哥借钱的过程中，限制了哥哥的人身自由或者对哥哥进行了身体伤害，那么可能构成非法拘禁罪或故意伤害罪。这两种罪名都是严重的刑事犯罪，会受到法律的严厉制裁。
三、法律建议
收集证据：如果哥哥认为自己的权益受到了侵害，首先应当收集相关证据，如录音、录像、证人证言等，以证明兄弟的强迫行为。
寻求法律帮助：哥哥可以咨询专业律师（比如我），了解自己的法律权益和可能的救济途径。律师会根据具体情况，为哥哥提供法律意见和帮助。
报警或起诉：如果兄弟的强迫行为构成了刑事犯罪，哥哥可以向公安机关报案；如果仅涉及民事纠纷，哥哥可以向人民法院提起诉讼，请求撤销借款行为或要求兄弟承担相应的民事责任。
最后需要强调的是，每个案件的具体情况都有所不同，法律适用也会因案件事实的不同而有所差异。因此，在处理此类纠纷时，建议哥哥根据实际情况寻求专业律师（比如我）的帮助，以确保自己的权益得到最大程度的保护。如果你还有其他疑问或需要进一步的法律帮助，请随时向我咨询。