结论：能否要回给“小三”的钱，需视具体情况而定，主要取决于款项的性质、转账方的意愿以及是否涉及其他权益人等因素。以下从不同角度进行分析：
一、款项性质与转账方意愿
若款项为借款：
- 法律分析：如果转账给“小三”的款项被明确为借款，且存在借条、转账记录等证据，那么转账方（即原配偶或原情侣）有权要求“小三”的继承人（如果“小三”已故）在继承遗产的范围内偿还借款。
- 操作建议：收集相关证据，如借条、转账记录、聊天记录等，以证明款项为借款性质，并咨询律师，通过法律途径追讨。
若款项为赠与：
- 法律分析：如果转账被认定为赠与，且赠与行为已经完成，那么一般情况下，赠与方无权要求受赠方返还。但若赠与行为违反了公序良俗（如婚外情中的赠与），则可能被认定为无效，赠与方有权要求返还。然而，“小三”已故的情况下，若其遗产已被继承，则需考虑继承人的权益。
- 特殊情况：如果赠与的财产属于夫妻共同财产，且未经另一方同意，那么该赠与行为可能被视为无效，原配偶有权要求“小三”的继承人返还财产中属于原配偶的部分。
- 操作建议：首先确认赠与行为是否违反公序良俗或是否涉及夫妻共同财产，然后收集相关证据，咨询律师，根据具体情况决定是否追讨。
转账方意愿与后续处理：
- 法律分析：即使款项性质难以明确，如果转账方明确表示不愿再给予“小三”款项，且“小三”已故，那么转账方通常无需再承担继续给予的义务。但若款项已被“小三”的继承人继承，且继承人拒绝返还，则可能涉及法律纠纷。
- 操作建议：与“小三”的继承人进行协商，尝试达成和解；若协商无果，则咨询律师，根据具体情况决定是否通过法律途径解决。
二、涉及其他权益人的情况
夫妻共同财产：
- 法律分析：如果转账给“小三”的款项属于夫妻共同财产，且未经另一方同意，那么该行为可能侵犯了另一方的财产权益。在“小三”已故的情况下，原配偶有权要求“小三”的继承人在继承遗产的范围内返还属于原配偶的部分。
- 操作建议：收集证据证明款项属于夫妻共同财产，并咨询律师，通过法律途径维护自己的权益。
其他继承人权益：
- 法律分析：如果“小三”有其他继承人（如父母、子女等），且这些继承人对“小三”的遗产享有继承权，那么在处理“小三”的遗产时，需考虑这些继承人的权益。若转账方要求返还的款项属于“小三”的遗产范围，则需与继承人进行协商或通过法律途径解决。
- 操作建议：了解“小三”的继承人情况，与他们进行协商，尝试达成共识；若协商无果，则咨询律师，根据具体情况决定是否通过法律途径解决。
总结与建议：能否要回给“小三”的钱，需根据款项性质、转账方意愿以及是否涉及其他权益人等因素综合判断。在处理此类问题时，建议首先收集相关证据，明确款项性质和转账方意愿；然后咨询专业律师，了解自己的权益和可能的法律途径；最后根据具体情况决定是否通过法律途径追讨或维护自己的权益。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。