结论：您可以考虑起诉对方，但具体是否构成侵权并值得起诉，需结合实际情况判断。以下从法律角度为您详细分析：
一、法律背景与依据
根据《中华人民共和国民法典》的相关规定，自然人享有名誉权，任何组织或者个人不得以侮辱、诽谤等方式侵害他人的名誉权。名誉是对民事主体的品德、声望、才能、信用等的社会评价。若对方的行为导致您的社会评价降低，即可能构成对您名誉权的侵害。
二、具体分析
对方行为是否构成侮辱：
- “快死去吧”这样的言辞，在常规语境下，属于对他人生命健康的恶意诅咒，具有明显的侮辱性质。若该言辞被第三人知晓，且足以导致您的社会评价降低，那么对方的行为就可能构成对您名誉权的侵害。
是否造成实际损害：
- 除了对方的行为具有侮辱性质外，还需要考虑该行为是否实际造成了您的损害。这种损害可以是精神上的，如感到痛苦、羞辱等；也可以是物质上的，如因名誉受损而导致的经济损失。若您能证明因对方的行为而遭受了实际损害，那么起诉的胜诉率会更高。
证据收集：
- 在考虑起诉前，您需要收集足够的证据来证明对方的行为以及该行为给您造成的损害。证据可以包括但不限于：对方辱骂您的录音、录像、证人证言、您的精神损害证明（如医疗记录、心理咨询记录等）以及因名誉受损而导致的经济损失证明（如收入减少的证明、合同解除的证明等）。
三、法律建议
尝试协商解决：
- 在考虑起诉前，您可以先尝试与对方进行协商，看是否能通过和解的方式解决问题。这不仅可以节省时间和精力，还可以避免不必要的法律纠纷。
咨询专业律师：
- 若协商无果，且您认为对方的行为确实构成了对您名誉权的侵害，那么您可以考虑咨询专业律师，了解具体的起诉流程和可能面临的法律后果。律师会根据您的具体情况，为您提供专业的法律建议和帮助。
准备起诉材料：
- 若决定起诉，您需要准备充分的起诉材料，包括起诉状、证据清单、相关证据等。这些材料需要详细、准确地描述对方的行为以及该行为给您造成的损害，以便法院能够全面、客观地了解案情。
四、可能的法律后果
- 若法院认定对方的行为构成了对您名誉权的侵害，那么对方可能需要承担停止侵害、恢复名誉、消除影响、赔礼道歉以及赔偿损失等民事责任。具体的责任形式和赔偿金额，会根据案情的具体情况以及对方的过错程度等因素进行综合判断。
最后，虽然您可以考虑起诉对方，但具体是否值得起诉以及起诉的胜诉率如何，还需结合实际情况进行判断。若您对此有进一步的疑问或需要更具体的法律建议，请随时向我咨询。