能否要回给“小三”的钱，需依据具体情况判断，以下从不同角度为您详细分析：
一、若赠与的钱财属于夫妻共同财产
法律分析：
- 夫妻在婚姻关系存续期间所得财产一般为夫妻共同财产，夫妻双方对共同财产有平等的处理权。
- 一方未经配偶同意，擅自将夫妻共同财产赠与“小三”，这种行为侵犯了配偶对共同财产的平等处理权，赠与行为可能被认定无效。
操作建议：
- 即使“小三”死亡，配偶也可向其继承人主张权利，要求继承人在继承遗产的范围内返还该部分财产。
- 继承人继承遗产时，应当清偿被继承人依法应当缴纳的税款和债务，缴纳税款和清偿债务以其遗产实际价值为限。
- 实际操作中，需要证明这些财产的来源与“小三”的不正当关系相关，这可能需要收集大量的证据，包括转账记录、聊天记录等。
二、若赠与的钱财属于个人财产
法律分析：
- 财产所有者有权自主处分其个人财产，即便赠与“小三”，法律也不会支持追回。
特殊情形：
- 如果存在受欺诈、胁迫等情形，赠与人可在法定期间内行使撤销权，要求返还财产。
- 但“小三”死亡会使法律关系更为复杂，可能需通过司法程序，提供充分证据来证明撤销赠与的法定事由。
三、若赠与行为存在可撤销情形
法律分析：
- 根据《民法典》的相关规定，若赠与行为存在以下情形，也可能被撤销追回：一是受赠人严重侵害赠与人或其近亲属；二是对赠与人有扶养义务而不履行；三是不履行赠与合同约定的义务。
- 如果赠与是以结婚为目的的附条件赠与，“小三”去世导致条件无法成就，赠与人可要求返还。
操作建议：
- 具体能否追回，要综合审查赠与的性质、目的、双方关系等因素，通过法律程序由法院判定。
四、实际操作中的困难与建议
困难：
- 证明财产来源与“小三”的不正当关系相关需要大量证据。
- 法律程序可能繁琐，且涉及时间成本。
建议：
- 尽早咨询专业律师，制定合适的诉讼策略。
- 收集并保存好所有相关证据，如转账记录、聊天记录、证人证言等。
- 保持冷静和理性，通过合法途径维护自身权益。
总结来说，能否要回给“小三”的钱，需根据财产性质、赠与行为是否有效及是否存在可撤销情形等因素综合判断。如果您正面临类似的困扰，可以直接向我咨询，我会根据您的具体情况，为您提供更详细的法律建议。