结论：知道对方出轨了，并不意味着一定能要回自己的钱，这取决于钱的性质、用途以及是否符合法律规定的返还条件。以下从不同角度进行分析：
一、钱的性质与用途
夫妻共同财产：
- 如果出轨方擅自将夫妻共同财产赠与给第三者，这种行为通常被视为无效。因为夫妻共同财产是双方共同所有的，任何一方未经对方同意，不得擅自处分。
- 在这种情况下，你可以通过法律途径要求第三者返还受赠的财产。法院在审理此类案件时，通常会考虑财产的性质、来源以及双方的过错程度等因素，来判定是否支持返还请求。
个人财产：
- 如果出轨方使用的是自己的个人财产（如婚前财产、个人继承或受赠的财产等）进行出轨行为（如给第三者购买礼物、转账等），那么这部分财产原则上属于出轨方个人所有。
- 在这种情况下，你通常无法直接要求第三者返还这些财产，因为出轨方有权处分自己的个人财产。但是，如果出轨方的行为严重损害了你的利益（如挥霍夫妻共同财产导致家庭经济困难等），你可以在离婚时要求出轨方进行经济补偿。
二、法律规定的返还条件
无效民事法律行为：
- 根据《民法典》的相关规定，无效的民事法律行为自始没有法律约束力。如果出轨方与第三者之间的财产赠与行为被认定为无效（如因违反公序良俗等），那么你可以要求第三者返还受赠的财产。
不当得利：
- 如果出轨方给第三者的财产没有合法依据，且造成了你的损失，那么你可以以不当得利为由要求第三者返还财产。但是，这需要你提供充分的证据证明出轨方的行为构成了不当得利。
三、实际操作建议
收集证据：
- 在要求返还财产之前，你需要收集充分的证据来证明出轨方的行为以及财产的流向。这包括但不限于转账记录、聊天记录、购物凭证等。
咨询律师：
- 由于每个案件的具体情况都不同，因此在实际操作中，我建议你直接向我咨询。我可以根据你的具体情况，为你提供更详细的法律建议和操作方案。
考虑离婚与财产分割：
- 如果出轨行为已经严重影响了你们的婚姻关系，且你决定离婚，那么在离婚过程中，你可以要求对夫妻共同财产进行合理分割。在分割时，法院会考虑双方的过错程度等因素，来判定财产的归属和分割比例。
总结与启示：知道对方出轨了并不意味着一定能要回自己的钱，这取决于钱的性质、用途以及是否符合法律规定的返还条件。在实际操作中，我建议你收集充分证据、咨询专业律师，并根据具体情况考虑离婚与财产分割等问题。如果你有任何疑问或需要进一步的法律帮助，请随时向我咨询。