结论：在第三者无辱骂、威胁等任何行为伤害出轨男配偶的情况下，配偶一般不能直接起诉第三者索要精神赔偿。不过，也存在一些特殊情况或间接途径可能涉及相关权益，以下为你详细分析。
一般情况：难以直接起诉索赔
从法律规定的角度来看，在一般的婚姻家庭纠纷中，若第三者没有实施辱骂、威胁等直接侵害配偶人身权益的行为，配偶很难直接依据侵权责任法（现相关内容已纳入《民法典》侵权责任编）向第三者主张精神赔偿。因为侵权责任的构成通常需要满足有侵权行为、损害后果、侵权行为与损害后果之间存在因果关系以及行为人主观上有过错这几个要件。在第三者没有实施辱骂、威胁等行为时，很难认定其存在直接侵害配偶权益的侵权行为，也就难以满足侵权责任的构成要件，所以配偶难以直接起诉第三者索要精神赔偿。
特殊情况：可能涉及权益的情形
- 若第三者与出轨方存在重婚或同居行为
- 法律背景：根据《民法典》第一千零九十一条规定，有下列情形之一，导致离婚的，无过错方有权请求损害赔偿：（一）重婚；（二）与他人同居；（三）实施家庭暴力；（四）虐待、遗弃家庭成员；（五）有其他重大过错。如果第三者与出轨方以夫妻名义共同生活，构成重婚，或者虽不以夫妻名义但持续、稳定地共同居住，构成同居关系，且这种行为是导致配偶与出轨方离婚的原因之一。
- 法律建议：在这种情况下，配偶作为无过错方在离婚时可以向出轨方主张损害赔偿，这里的损害赔偿既包括物质损害赔偿，也可能包括精神损害赔偿。虽然不是直接起诉第三者，但第三者的行为是引发配偶获得赔偿的一个重要因素。例如，配偶发现出轨方与第三者长期同居，导致夫妻感情破裂而离婚，配偶在离婚诉讼中可以同时要求出轨方给予精神损害赔偿。
- 若第三者的行为间接导致配偶精神严重受损且有证据证明
- 法律背景：虽然第三者没有直接实施辱骂、威胁等行为，但如果其与出轨方的婚外情行为极其恶劣，例如长期公开炫耀与出轨方的关系，给配偶造成了极大的精神痛苦，导致配偶出现严重的精神疾病等情况，并且配偶能够提供充分的证据证明其精神损害与第三者的行为之间存在因果关系。
- 法律建议：从理论上来说，配偶有可能以第三者侵犯其人格权（如名誉权、隐私权等间接影响精神健康）为由，向法院提起诉讼要求精神赔偿。但在实践中，这种间接因果关系的认定难度较大，需要配偶提供非常充分、确凿的证据，如专业的精神鉴定报告、证人证言等，以证明其精神损害的程度以及与第三者行为的关联性。
后续行动建议：如果你正处于这样的情况中，建议你先收集相关证据，比如出轨方与第三者的往来记录、能够证明他们同居或重婚的证据（如共同生活的照片、视频、邻居的证言等），以及证明你精神受到损害的证据（如医院的诊断证明、治疗记录等）。如果你打算通过法律途径解决，可以随时向我咨询具体的操作流程和注意事项。