针对您提出的问题，即“已婚男人转给小三的钱只有转账记录可以要回去吗”，以下是我为您提供的详细解答：
一、法律依据与核心原则
根据《中华人民共和国民法典》的相关规定，夫妻在婚姻关系存续期间所得的财产，一般属于夫妻共同财产，双方对共同财产享有平等的处理权。若一方未经另一方同意，擅自将夫妻共同财产赠与他人，特别是违背社会公序良俗和婚姻伦理道德的情况下（如赠与“小三”），该赠与行为通常被认定为无效。因此，从法律原则上讲，您是有权要求返还这些财产的。
二、追回条件与关键证据
婚姻关系存续期间：转账必须发生在夫妻关系存续期间，且未经您（作为配偶）的同意。
转账性质为赠与：您需要证明转账的性质是赠与，而非其他合法交易或债务清偿。转账时附带的言语表达（如“我爱你”、“这是给你的礼物”等）、转账备注或后续聊天记录等，都可以作为证明转账性质的证据。
受赠人明知对方已婚：如果“小三”明知对方已婚仍接受赠与，这可能构成恶意串通损害您合法权益的行为，进一步支持您的追回请求。
保留完整证据链：除了转账记录外，您还应尽可能收集其他相关证据，如聊天记录、通话录音、照片、购买凭证等，以形成完整的证据链，证明转账的实际发生及其性质。
三、追回途径与方法
协商解决：首先，您可以尝试与“小三”进行协商，要求其返还财产。在协商过程中，保持冷静和理性，明确表达您的诉求和法律依据。
调解处理：如果协商无果，您可以寻求第三方调解机构的帮助，如社区调解委员会、婚姻家庭调解中心等。这些机构可以提供中立的调解服务，帮助双方达成和解。
法律诉讼：若协商和调解均无法解决问题，您可以向人民法院提起诉讼，要求确认赠与行为无效并返还财产。在诉讼过程中，您需要提供充分的证据证明自己的主张，并遵循法院的审理程序。
四、注意事项与建议
及时行动：发现配偶有出轨及转移财产的行为后，应尽快采取行动，以免错过最佳维权时机。时间拖得越久，证据可能越难以收集，且财产可能已被转移或消耗。
保护隐私：在处理此类问题时，应注意保护个人隐私和尊严，避免过度曝光和传播相关信息。这有助于维护您的社会形象和家庭关系。
寻求专业帮助：如有需要，您可以咨询律师或相关法律专业人士的意见和帮助。他们可以提供专业的法律建议和指导，帮助您更好地维护自己的权益。
综上所述，虽然只有转账记录可能增加了一些追回的难度，但只要您能够提供充分的证据证明转账的性质和来源，并遵循正确的追回途径和方法，您仍然是有可能追回这些财产的。