在大多数情况下，如果“小三”收到的钱属于不当得利或者涉及侵犯夫妻共同财产权，那么这笔钱是有可能被要求退回的，不存在所谓“不能退回”的绝对情况。不过，我们可以从几个角度来分析在什么情况下“小三”可能面临需要退回钱款的风险，以及相对难以退回的特殊情形：
需要退回钱款的情况
不当得利：
- 如果“小三”收到的钱没有合法依据，比如是基于欺骗、胁迫或者误转等原因获得的，那么这笔钱就属于不当得利。根据《中华人民共和国民法典》的相关规定，受损失的人有权请求得利人返还取得的利益。
侵犯夫妻共同财产权：
- 在婚姻关系存续期间，夫妻双方对共同财产享有平等的处理权。如果一方未经另一方同意，擅自将共同财产赠与“小三”，这种行为通常会被认定为无效。因为这不仅侵犯了另一方的财产权，也违反了公序良俗原则。在这种情况下，“小三”需要退回所收到的钱款。
相对难以退回的特殊情形（但并非绝对不能退回）
钱款已用于消费或无法追回：
- 如果“小三”收到的钱款已经用于消费或者无法以合理方式追回，比如已经购买了无法退换的商品或服务，那么在实际操作中，要求“小三”全额退回可能会面临困难。但这并不意味着“小三”可以完全免除责任，如果钱款来源涉及违法或侵权行为，“小三”仍可能面临法律上的不利后果。
存在复杂法律关系或争议：
- 在某些情况下，“小三”与赠与方之间可能存在复杂的法律关系或争议，比如双方之间存在借贷关系、投资关系等。如果这些关系与赠与行为相互交织，那么要求“小三”退回钱款可能会涉及更多的法律问题和争议点。在这种情况下，需要具体分析法律关系，确定钱款的性质和归属。
赠与方自愿放弃追回：
- 虽然这种情况较为少见，但如果赠与方明确表示自愿放弃追回钱款，并且这种放弃不违反法律法规或公序良俗原则，那么“小三”可能无需退回钱款。然而，这种放弃通常需要以书面形式或其他有效方式予以确认，以避免后续产生纠纷。
法律建议
- 对于原配而言：如果发现配偶擅自将共同财产赠与“小三”，可以收集相关证据（如转账记录、聊天记录等），通过法律途径要求“小三”退回钱款。同时，也可以考虑与配偶进行协商，寻求和解或调解的方式解决纠纷。
- 对于“小三”而言：如果收到不明来源的钱款或者涉及复杂法律关系的钱款，建议谨慎处理并咨询专业律师的意见。避免因为不当处理而陷入法律纠纷或承担不必要的法律责任。
总之，不存在“小三”绝对不能把钱退回的情况。在处理这类问题时，需要具体分析法律关系、钱款性质以及相关证据等因素。如果有任何疑问或需要进一步的法律帮助，请直接向我咨询。