结论：关于男方与“小三”在17岁时在一起，分手四年后转账记录的钱能否要回，这主要取决于转账的性质、金额以及是否存在有效的法律关系等因素，一般情况下，若转账属于赠与性质且无特殊情形，可能难以要回；若转账属于借款或其他可撤销的情形，则有可能要回。以下从不同角度进行分析：
一、转账性质的影响
赠与性质：
- 如果转账被认定为赠与，即男方自愿将钱款给予对方，且没有附加任何条件或期望回报，那么根据《中华人民共和国民法典》中关于赠与合同的规定，赠与一旦完成，除非存在法定撤销情形（如受赠人严重侵害赠与人或其近亲属的合法权益、对赠与人有扶养义务而不履行等），否则赠与人不得随意撤销赠与。
- 在此情况下，由于转账发生在双方交往期间，且男方作为成年人（假设转账时已成年，若未成年的转账行为效力待定，需其法定代理人追认），其赠与行为通常被视为有效，因此分手后要求返还可能较为困难。
借款性质：
- 如果转账被认定为借款，即男方将钱款借给对方，并期望对方在未来某个时间点偿还，那么根据《中华人民共和国民法典》中关于借款合同的规定，借款人有义务按照约定的期限和方式偿还借款。
- 在此情况下，男方有权要求对方返还借款，并可以通过法律途径追讨。但需要注意的是，要证明转账属于借款性质，通常需要提供相关的证据，如借条、聊天记录等。
二、转账金额的影响
- 转账金额的大小也可能影响能否要回钱款。对于小额转账，法院可能更倾向于认定为赠与或日常消费支出，从而不支持返还请求。
- 对于大额转账，尤其是超出日常消费水平的转账，法院可能会更仔细地审查转账的性质和目的，以确定是否应返还。
三、特殊情形的考虑
未成年人转账：
- 如果转账时男方或对方未满18周岁，属于限制民事行为能力人或无民事行为能力人，那么其转账行为可能因缺乏相应的民事行为能力而无效或效力待定。
- 在此情况下，男方的法定代理人（如父母）有权要求对方返还钱款，但需要提供充分的证据证明转账行为的存在以及转账时男方的年龄和民事行为能力状况。
存在欺诈、胁迫等情形：
- 如果转账是在对方欺诈、胁迫等情形下进行的，那么男方有权根据《中华人民共和国民法典》中关于可撤销民事法律行为的规定，请求法院撤销转账行为并要求对方返还钱款。
- 但同样需要提供充分的证据证明存在欺诈、胁迫等情形。
四、法律建议
收集证据：
- 男方应尽可能收集与转账相关的证据，如转账记录、聊天记录、借条等，以证明转账的性质和目的。
咨询专业律师：
- 由于每个案件的具体情况都不同，且法律适用也可能因地区而异，因此男方在决定是否要回钱款以及如何要回时，应咨询专业律师的意见。
- 我是林嘉鑫律师，专注于婚姻家庭、遗产继承领域，你可以直接向我咨询相关法律问题。
考虑和解或调解：
- 在诉讼之前，男方也可以考虑与对方进行和解或调解，以达成双方都能接受的解决方案。这不仅可以节省时间和精力，还可以避免不必要的法律纠纷。