结论：能否要回“小三”用的钱，需视具体情况而定，主要取决于该笔钱款的性质以及是否能够提供充分的证据来支持自己的主张。以下从不同角度进行分析：

一、钱款性质

1. 夫妻共同财产：

   • 如果“小三”所用的钱是夫妻共同财产，且未经配偶同意擅自处分，那么配偶有权要求返还。因为夫妻共同财产属于双方共同所有，任何一方未经对方同意不得擅自处分。
   • 法律依据：根据《中华人民共和国民法典》第一千零六十二条，夫妻在婚姻关系存续期间所得的财产，为夫妻的共同财产，归夫妻共同所有，双方有平等的处理权。

2. 个人财产：

   • 如果“小三”所用的钱是其中一方的个人财产，且该方自愿给予“小三”，那么另一方通常无权要求返还。因为个人财产属于个人所有，个人有权自由处分。
   • 例外情况：如果个人财产的给予行为违反了公序良俗（如婚外情等），虽然法律可能不会直接干预财产的给予，但在道德和社会舆论层面会受到谴责。不过，从法律角度讲，这并不构成要求返还的直接依据。

二、证据要求

1. 证明钱款来源：

   • 要证明“小三”所用的钱是夫妻共同财产或个人财产，需要提供相应的证据，如银行转账记录、财产证明等。

2. 证明未经同意：

   • 如果主张返还的是夫妻共同财产，还需要证明该笔钱款的处分未经配偶同意。这可能需要提供聊天记录、证人证言等证据。

3. 证明钱款用途：

   • 在某些情况下，还需要证明“小三”所用的钱确实用于了不正当目的（如婚外情等），虽然这并非要求返还的直接法律依据，但有助于增强主张的说服力。

三、实际操作建议

1. 收集证据：

   • 在发现“小三”使用夫妻共同财产或个人财产后，应尽快收集相关证据，包括银行转账记录、聊天记录、证人证言等。

2. 协商解决：

   • 在证据充分的情况下，可以尝试与“小三”或对方配偶进行协商，要求返还钱款。协商过程中，可以保持冷静和理性，避免情绪化行为。

3. 法律途径：

   • 如果协商无果，可以考虑通过法律途径解决。可以向法院提起诉讼，要求“小三”返还钱款。在诉讼过程中，需要提供充分的证据来支持自己的主张。

四、可能面临的挑战

1. 证据收集难度：

   • 在某些情况下，证据可能难以收集或不够充分，这可能导致主张难以得到支持。

2. 法律程序复杂：

   • 法律程序可能相对复杂且耗时较长，需要耐心和毅力来应对。

3. 社会舆论压力：

   • 涉及婚外情等敏感话题时，可能会面临一定的社会舆论压力。需要做好心理准备并理性应对。

最后，能否要回“小三”用的钱取决于多种因素，包括钱款性质、证据充分性以及法律程序等。如果有具体问题或需要进一步的法律帮助，可以直接向我咨询。