结论：如果兄弟欠的钱，债主老是骚扰你及家属，你是可以依法起诉债主或采取其他法律措施来维护自己及家属的合法权益的。
一、从民事侵权角度分析
名誉权侵害：
- 若债主在骚扰过程中，使用辱骂性语言，导致你或家属的社会评价降低，比如在小范围内或公开场合进行辱骂，这构成对名誉权的侵害。根据《中华人民共和国民法典》第一千零二十四条，民事主体享有名誉权，任何组织或者个人不得以侮辱、诽谤等方式侵害他人的名誉权。你可以要求债主停止侵害、恢复名誉、消除影响、赔礼道歉，并索赔精神损害抚慰金。
隐私权侵害：
- 若债主通过不正当手段获取并频繁骚扰你的家属，或者泄露与债务无关的个人隐私信息，如身份证号、家庭住址等，干扰家属的正常生活安宁，这属于对隐私权的侵害。同样依据《中华人民共和国民法典》第一千零三十二条，自然人享有隐私权，任何组织或者个人不得以刺探、侵扰、泄露、公开等方式侵害他人的隐私权。你可要求债主承担停止侵害、赔偿损失等民事责任。
二、从治安管理处罚角度分析
- 根据《中华人民共和国治安管理处罚法》第四十二条，债主多次发送侮辱、恐吓信息或公然侮辱他人的行为，可能面临五日以下拘留或五百元以下罚款的处罚；情节较重的，处五日以上十日以下拘留，并可并处五百元以下罚款。你可以向公安机关报案，要求对债主的违法行为进行查处。
三、从刑事责任角度分析
- 若债主采取“软暴力”手段催收债务，如频繁打电话、发送威胁短信、上门滋扰等，且情节严重，可能构成犯罪。根据相关法律及司法解释，此类行为可能面临刑事处罚。
- 此外，若债主公然侮辱、诽谤你或家属，情节严重的，还可能触犯《中华人民共和国刑法》第二百四十六条的规定，涉嫌侮辱、诽谤罪，处三年以下有期徒刑、拘役、管制或者剥夺政治权利。
四、应对策略与建议
协商先行：
- 在采取法律手段前，可以尝试与债主沟通，明确告知其行为的违法性，并要求立即停止。若协商无果，再考虑法律途径。
证据收集：
- 确保收集充分的证据，如聊天记录、通话记录、视频、证人证言等，以支持你的诉讼主张。这些证据对于证明债主的侵权行为至关重要。
法律行动：
- 提起民事诉讼：向当地法院提起诉讼，要求债主承担侵权责任，包括赔偿损失、道歉等。
- 报案处理：若债主的行为构成犯罪，如严重的侮辱、诽谤或骚扰，可向公安机关报案，追究其刑事责任。
五、合法追债途径的提醒
- 债权人在追债过程中应遵守法律法规，不得采取非法手段。合法追债途径包括协商达成还款协议、向法院提起诉讼、申请强制执行等。
- 债务人面对骚扰时，应及时报警、保留证据，并通过法律途径寻求救济。
六、总结与进一步建议
面对债主的骚扰，保护自己和家人的合法权益是首要任务。在必要时，请勇敢拿起法律武器，通过民事诉讼、治安管理处罚或刑事追责等方式，坚决维护自己的权益。同时，注重证据的收集和保存，以确保在法律程序中能够有力地支持自己的主张。如果你有任何疑问或需要进一步的法律帮助，请随时向我咨询。