结论：新婚姻法（即现行有效的《中华人民共和国民法典》婚姻家庭编）并未直接规定女方出轨时男方有权要回所有给女方的费用，但男方在特定情况下有权要求返还部分或全部财产，这主要取决于财产的性质、赠与的目的以及是否存在法定返还情形。

详细分析：

1. 财产性质与赠与目的：

   • 夫妻共同财产：在婚姻关系存续期间，夫妻双方共同取得的财产属于夫妻共同财产。如果男方给女方的费用来源于夫妻共同财产，且没有特别约定为个人财产，那么这部分费用在离婚时通常会被视为夫妻共同财产进行分割，而不是男方单方面要回。
   • 个人财产：如果男方给女方的费用是其个人财产，且赠与行为没有附条件或附义务，那么一般情况下，赠与完成后，财产即归女方所有，男方无权要求返还。但是，如果赠与行为是基于婚姻关系存续为前提，且女方存在严重过错（如出轨）导致婚姻破裂，男方可能可以主张赠与行为的目的无法实现，从而要求撤销赠与并返还财产。不过，这一主张的成功与否取决于具体案情和法院的判断。

2. 法定返还情形：

   • 隐藏、转移、变卖、毁损夫妻共同财产：如果女方在婚姻关系存续期间或离婚过程中隐藏、转移、变卖、毁损夫妻共同财产，男方有权要求女方返还或赔偿相应损失。但这与出轨行为本身不直接相关，而是与财产处理行为有关。
   • 挥霍夫妻共同财产：如果女方挥霍夫妻共同财产，严重损害夫妻共同财产利益，男方也有权要求返还或赔偿。同样，这与出轨行为不直接相关，但可能作为离婚时财产分割的考虑因素之一。
   • 特定赠与的撤销：如果男方给女方的费用是特定物品或大额财产，且赠与行为附有条件或义务（如以婚姻存续为条件），当女方违反这些条件或义务（如出轨导致婚姻破裂）时，男方可能可以主张撤销赠与并要求返还。

3. 出轨行为的法律后果：

   • 出轨行为本身并不直接导致财产返还的法律后果，但它可能作为离婚时财产分割、子女抚养权判定以及损害赔偿请求的考虑因素之一。如果男方能够证明女方出轨行为对婚姻关系造成了严重破坏，且自己因此遭受了精神损害或经济损失，他可以在离婚时提出损害赔偿请求。

法律建议：

• 收集证据：如果男方认为女方出轨且希望要回部分或全部财产，他应首先收集相关证据，包括财产转移记录、赠与合同（如有）、出轨行为的证据等。
• 咨询专业律师：由于财产返还问题涉及复杂的法律关系和证据收集，男方应咨询专业律师以获取具体的法律建议和操作指导。
• 考虑和解或调解：在诉讼之前，双方可以考虑通过和解或调解的方式解决财产争议，以节省时间和成本。

可能法律后果：

• 如果男方能够成功证明女方存在法定返还情形或赠与行为可撤销，他可能能够要回部分或全部财产。
• 如果男方无法提供充分证据或法院认为其主张不成立，他可能无法要回财产或只能获得部分补偿。

总之，女方出轨并不直接导致男方有权要回所有给女方的费用。男方能否要回财产取决于多种因素，包括财产性质、赠与目的、是否存在法定返还情形以及出轨行为的法律后果等。如有具体法律问题，请直接向我咨询。