若您想以返还财产为由起诉“小三”，即便没有出轨的直接证据，也可以尝试通过法律途径维护自身权益；但若您想以精神损害赔偿为由起诉，没有出轨的直接证据，则可能面临较大的败诉风险。以下是对这两种情况的详细分析：
以返还财产为由起诉
法律依据：
- 根据《中华人民共和国民法典》的相关规定，夫妻在婚姻关系存续期间所得的财产，归夫妻共同所有。若配偶私自将共同财产赠与“小三”，则属于不当得利，您有权要求返还。
证据收集：
- 虽然没有出轨的直接证据，但您可以收集配偶给“小三”转账、购房、购车等涉及财产转移的凭证。这些凭证可以是银行转账记录、购房合同、购车发票等。
- 此外，您还可以尝试收集配偶与“小三”之间的通讯记录，如短信、微信聊天记录等，以证明他们之间存在不正当关系，并进而证明财产转移的非法性。但需注意，通讯记录需保证来源合法，且内容真实。
诉讼策略：
- 在起诉时，您应明确诉讼请求，即要求“小三”返还被转移的夫妻共同财产。
- 同时，您需要提供充分的证据来证明财产转移的事实以及该财产属于夫妻共同财产。
以精神损害赔偿为由起诉
法律依据：
- 若您想以配偶出轨为由要求“小三”承担精神损害赔偿责任，则需要提供充分的证据来证明配偶与“小三”之间存在不正当关系。
证据要求：
- 出轨的直接证据，如亲密照片、视频等，对于证明不正当关系至关重要。若没有这些直接证据，您可能需要构建一个完整的证据链来支持您的诉求。
- 证据链可以包括配偶与“小三”之间的通讯记录、共同出行的记录、目击证人的证言等。但需注意，这些证据需相互印证，形成一个完整的逻辑链条。
诉讼风险：
- 若没有出轨的直接证据，且证据链不够完整或存在瑕疵，则您可能面临较大的败诉风险。因为法院在审理此类案件时，通常会依据“谁主张，谁举证”的原则进行裁判。若您无法提供充分的证据来支持您的诉求，则法院可能无法认定您所主张的事实成立。
综合建议
- 明确诉求：在起诉前，您应明确自己的诉讼请求以及所依据的法律条款。这有助于您更有针对性地收集证据和制定诉讼策略。
- 积极收集证据：无论您选择以哪种理由起诉，都需要积极收集证据来支持您的诉求。证据可以是直接的也可以是间接的，但需保证来源合法且内容真实。
- 寻求专业帮助：若您在收集证据或制定诉讼策略方面存在困难，可以寻求专业律师的帮助。律师可以为您提供法律咨询、证据收集、诉讼代理等方面的服务。
最后，需要强调的是，法律诉讼是一个复杂且需要谨慎处理的过程。在决定起诉前，您应充分了解相关法律规定和诉讼风险，并做好充分的准备。若您有任何疑问或需要进一步的法律帮助，请随时向我咨询。