结论：能否要回转账记录上的钱，需根据转账的性质、是否存在合法依据以及是否超过诉讼时效等因素综合判断。若转账属于无合法依据的赠与，且未超过诉讼时效，一般可以主张返还；若存在合法依据或已超过诉讼时效，则可能无法主张返还。以下是对此问题的详细分析：
一、转账性质及合法依据的判断
赠与性质：
- 若转账被认定为赠与，且赠与行为本身不违反法律、行政法规的强制性规定，不违背公序良俗，那么赠与合同是有效的。但在此情况下，若赠与行为发生在有配偶者与他人之间，且赠与的财产属于夫妻共同财产，那么该赠与行为可能因侵犯配偶的财产权益而无效。
- 法律依据：根据《中华人民共和国民法典》的相关规定，赠与合同是赠与人将自己的财产无偿给予受赠人，受赠人表示接受赠与的合同。若赠与行为侵犯他人合法权益，则赠与合同可能无效。
其他性质：
- 若转账并非赠与，而是基于其他法律关系（如借贷、投资等），则需要根据具体法律关系来判断转账的合法性及是否应返还。
二、诉讼时效的考虑
- 诉讼时效期间：根据《中华人民共和国民法典》的规定，向人民法院请求保护民事权利的诉讼时效期间为三年。自权利人知道或者应当知道权利受到损害以及义务人之日起计算。
- 超过诉讼时效的后果：若超过诉讼时效期间，权利人向人民法院请求保护的，人民法院将不予支持。但若义务人同意履行义务或部分履行义务，则诉讼时效中断，重新计算。
三、具体情形分析
转账属于无合法依据的赠与，且未超过诉讼时效：
- 在此情况下，若转账行为侵犯了配偶的财产权益，配偶可以主张赠与合同无效，并要求返还转账金额。由于“小三”已故，其继承人应在继承遗产的范围内承担返还责任。
转账存在合法依据或已超过诉讼时效：
- 若转账行为存在合法依据（如借贷合同、投资协议等），则需根据具体法律关系来判断是否应返还。若已超过诉讼时效，则可能无法主张返还。
四、建议与行动指南
- 收集证据：首先，需要收集转账记录、聊天记录、证人证言等证据，以证明转账的性质及是否存在合法依据。
- 咨询律师：由于此类案件涉及复杂的法律关系和证据收集，建议咨询专业律师，以便更好地维护自己的合法权益。
- 提起诉讼：在证据充分且未超过诉讼时效的情况下，可以向人民法院提起诉讼，要求返还转账金额。
最后，每个案件的具体情况都有所不同，因此在实际操作中需根据具体情况灵活应对。若您在此方面遇到法律问题，可以直接向我咨询，我会根据您的具体情况提供详细的法律建议。