结论前置：只有转账记录的情况下，转给“小三”的钱是有可能要回来的，但具体能否成功要回，需结合转账的性质、金额、用途以及证据的充分性等多方面因素综合判断。
一、法律背景与依据
根据《中华人民共和国民法典》的相关规定，夫妻在婚姻关系存续期间所得的财产，归夫妻共同所有，双方有平等的处理权。若一方未经另一方同意，擅自将夫妻共同财产赠与他人，特别是赠与给“小三”这种违背公序良俗的行为，另一方有权请求法院确认该赠与行为无效，并要求受赠人返还财产。
二、转账记录作为证据的重要性
转账记录是证明资金流向的关键证据，它能够直接显示款项的支付时间、支付金额以及收款人等信息。在要求“小三”返还财产的诉讼中，转账记录是证明赠与行为存在以及赠与金额的重要依据。然而，仅有转账记录可能并不足以完全证明赠与行为的性质，特别是当对方抗辩称该款项为借款、投资款或其他合法用途时。
三、可能影响返还的因素
转账性质：
- 若转账被认定为赠与，且该赠与行为违背了公序良俗（如赠与给“小三”），则赠与行为可能被法院确认无效，受赠人需返还财产。
- 若转账被认定为借款、投资款或其他合法用途，则可能无法直接要求返还，而需通过其他法律途径解决。
转账金额与用途：
- 转账金额的大小以及用途也可能影响返还的可能性。例如，若转账金额巨大且明显超出日常生活需要，且用于不正当目的（如维持不正当关系），则更可能被认定为无效赠与。
- 若转账金额较小或用于合法目的（如购买共同物品、支付共同费用等），则可能难以直接要求返还。
证据的充分性：
- 除了转账记录外，还需提供其他证据来佐证赠与行为的存在以及违背公序良俗的事实。例如，聊天记录、短信、邮件等可以证明双方存在不正当关系的证据。
- 若证据不足或存在矛盾，可能影响法院对案件的判断，从而降低返还的可能性。
四、法律建议与行动步骤
收集证据：
- 除了转账记录外，尽可能收集其他能够证明赠与行为存在以及违背公序良俗的证据。
- 注意证据的合法性和真实性，避免使用非法手段获取证据。
咨询律师：
- 在提起诉讼前，建议咨询专业律师，了解案件的法律风险和可能的法律后果。
- 律师可以根据具体情况提供针对性的法律建议和诉讼策略。
提起诉讼：
- 若决定提起诉讼，需准备充分的证据材料，并按照法院的要求提交起诉状和相关证据。
- 在诉讼过程中，积极配合法院的调查和审理工作，维护自己的合法权益。
五、可能的法律后果
- 若法院确认赠与行为无效，受赠人需返还财产。返还的财产范围通常包括赠与的款项以及可能产生的利息等。
- 若法院认为赠与行为有效或证据不足，则可能无法直接要求返还财产。此时，需考虑通过其他法律途径解决纠纷。
最后，转给“小三”的钱只有转账记录时，要回的可能性存在但并非绝对。具体能否成功要回需结合转账的性质、金额、用途以及证据的充分性等多方面因素综合判断。若您面临此类问题，建议直接向我咨询，我会根据您的具体情况提供针对性的法律建议和帮助。