在不知情的情况下被“小三”，您确实有权采取法律行动，但直接起诉“男人”可能涉及不同的法律路径和考量，具体分析如下：
民事侵权角度：
- 名誉权受损：如果对方的行为（如公开关系、散布不实信息等）导致您的名誉受损，您可以依据《中华人民共和国民法典》中关于名誉权的规定，起诉对方侵犯您的名誉权，要求停止侵害、赔礼道歉、赔偿损失等。
- 精神损害赔偿：在极端情况下，如果对方的欺骗行为给您造成了严重的精神损害，您还可以在起诉名誉权侵权的同时，主张精神损害赔偿。但这一主张需要满足一定的条件，即损害后果必须达到严重的程度，且需有充分的证据支持。
婚姻家庭角度（若对方已婚）：
- 重婚罪的认定：如果对方在已婚的状态下与您以夫妻名义共同生活，可能构成重婚罪。但需要注意的是，重婚罪的认定较为严格，通常需要满足“以夫妻名义共同生活”的条件，且需要充分的证据支持。此外，重婚罪是刑事犯罪，需要由公安机关立案侦查，检察院提起公诉，您个人无法直接起诉。不过，您可以向公安机关报案，提供线索和证据。
- 无过错方权益保护：即使对方不构成重婚罪，如果其隐瞒婚姻状况与您交往，导致您在不知情的情况下成为“小三”，您在道德上并无过错。在对方离婚时，如果涉及财产分割等问题，虽然您无法直接参与，但对方的欺骗行为可能影响法院对其过错程度的认定，从而间接影响财产分割的结果。不过，这一点更多是基于道德和公平原则的考量，并非直接的法律救济途径。
实际操作建议：
- 收集证据：无论您选择哪种法律路径，收集证据都是关键。包括但不限于聊天记录、照片、视频、证人证言等，这些证据将有助于证明对方的行为和您的损害后果。
- 咨询专业律师：虽然我可以为您提供一些基本的法律建议，但每个案件的具体情况都有所不同。因此，我建议您在采取行动前咨询专业律师，以便更准确地评估您的法律权益和可能的救济途径。
- 心理调适：被“小三”无疑是一种情感上的伤害。在寻求法律救济的同时，也请您关注自己的心理健康，必要时可以寻求心理咨询师的帮助。
总结来说，在不知情的情况下被“小三”，您虽然无法直接起诉对方“犯罪”，但可以通过民事侵权诉讼等方式维护自己的合法权益。同时，也请您保持冷静和理性，通过合法途径解决问题。如果您有任何进一步的疑问或需要具体的法律帮助，请随时向我咨询。