结论：您可以考虑起诉对方，但具体是否构成侵权及能否胜诉，需结合实际情况判断。以下从不同角度为您详细分析：
一、法律角度：对方行为可能构成名誉权侵权
根据《中华人民共和国民法典》第一千零二十四条规定：“民事主体享有名誉权。任何组织或者个人不得以侮辱、诽谤等方式侵害他人的名誉权。名誉是对民事主体的品德、声望、才能、信用等的社会评价。”对方无缘无故骂您“吸毒犯”，若该言论不属实且足以使您的社会评价降低，则可能构成对您名誉权的侵害。
二、起诉条件及流程
起诉条件：
- 对方存在侮辱、诽谤等侵害您名誉权的行为；
- 该行为导致您的社会评价降低；
- 您能够提供证据证明上述事实。
起诉流程：
- 准备证据：收集对方辱骂您的证据，如聊天记录、录音、视频、证人证言等；
- 撰写起诉状：明确诉讼请求，如要求对方停止侵害、赔礼道歉、赔偿损失等；
- 提交法院：向有管辖权的人民法院提交起诉状及证据材料；
- 参与诉讼：按照法院通知参与庭审，陈述事实、提供证据、进行辩论等。
三、可能面临的法律后果
若胜诉：
- 法院可能判决对方停止侵害您的名誉权；
- 要求对方公开赔礼道歉；
- 根据您的实际损失，判决对方赔偿相应的经济损失及精神损害抚慰金。
若败诉：
- 若法院认为对方行为不构成侵权，或您提供的证据不足以证明侵权事实，则可能驳回您的诉讼请求；
- 您需承担诉讼费用（如案件受理费、律师费等，具体根据案件情况及法院判决而定）。
四、建议与注意事项
- 及时取证：在对方辱骂您时，尽量保留相关证据，如聊天记录、录音等，以便后续维权；
- 评估损失：在起诉前，评估您的实际损失，包括经济损失及精神损害等，以便在起诉状中明确诉讼请求；
- 考虑和解：在起诉前，您可以尝试与对方协商和解，要求对方停止侵害、赔礼道歉等，以节省诉讼成本及时间；
- 寻求专业帮助：若您对法律程序不熟悉或案件情况复杂，建议寻求专业律师的帮助，以提高胜诉几率及维权效率。
最后，若您遇到此类情况，且认为对方行为严重侵害了您的名誉权，您可以考虑起诉对方。但具体是否起诉及如何起诉，需结合您的实际情况及证据情况来判断。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。