针对您提出的“只有转给小三的钱只有转账记录可以起诉要回钱吗”这一问题，以下是我为您提供的详细解答：

一、转账记录作为证据的初步分析

转账记录确实可以作为资金流转的初步证据，它证明了您与对方（即“小三”）之间存在资金往来。然而，仅凭转账记录本身，往往难以直接证明这笔款项的性质和用途，尤其是当涉及到是否构成赠与、借款或其他法律关系时。

二、起诉要回钱款的条件

1. 证明款项性质：

   • 若要起诉要回钱款，您需要证明这笔转账并非基于正常的情感赠与，而是基于某种法律关系（如借款、不当得利等）应返还的财物。
   • 例如，如果转账时附有明确的借款说明或聊天记录中对方承认借款，这将大大增强您的证据力。

2. 证明款项来源：

   • 若转账资金属于夫妻共同财产，且未经配偶同意擅自转给“小三”，则侵犯了配偶对共同财产的处分权。此时，配偶有权要求返还。
   • 您需要提供证据证明该款项属于夫妻共同财产，如银行流水、共同财产证明等。

3. 形成完整证据链：

   • 仅凭转账记录往往不足以形成完整的证据链。您还需要结合其他证据，如聊天记录、通话录音、证人证言等，来证明转账的目的、性质和用途。
   • 这些证据应相互印证，形成一个完整的证据体系，以支持您的诉求。

三、诉讼风险与不确定性

1. 对方抗辩：

   • 在诉讼过程中，对方可能会提出抗辩，如称转账是自愿赠与、借款已归还等。
   • 您需要准备充分的证据来反驳对方的抗辩，以维护自己的权益。

2. 法院审理：

   • 法院会根据双方提供的证据和事实进行审理，并作出判决。
   • 如果证据不足或无法证明转账的性质和用途，法院可能难以支持您的诉求。

四、建议与总结

1. 综合考量：

   • 在决定是否起诉前，您需要综合考量各种因素，包括证据的充分性、诉讼的成本和风险等。
   • 如果证据不足或诉讼风险较大，您可以考虑通过其他途径解决纠纷，如协商、调解等。

2. 谨慎行事：

   • 仅凭转账记录起诉要回钱款存在风险和不确定性。您需要谨慎行事，避免盲目诉讼。
   • 在诉讼前，建议您咨询专业律师的意见，以制定更合理的诉讼策略。

综上所述，只有转给“小三”的钱且只有转账记录的情况下，起诉要回钱款并非易事。您需要证明款项的性质、来源和用途，并形成完整的证据链来支持您的诉求。同时，您也需要做好应对对方抗辩和法院审理的准备。因此，在决定是否起诉前，请务必综合考量各种因素并谨慎行事。