能否要回男方自愿给予女方的钱款，需视具体情况而定。以下是对此问题的详细分析：
一. 赠与性质的情况
一般性赠与：如果男方给予女方的钱款是基于赠与的意思表示，如用于日常消费、表达爱意的礼物或者单纯的金钱赠与等，一旦赠与行为完成，且不存在法定的撤销情形，赠与财产的所有权就发生转移，受赠方可以合法持有该财产。法定的撤销情形包括严重侵害赠与人或者赠与人近亲属的合法权益、对赠与人有扶养义务而不履行、不履行赠与合同约定的义务等，但这些情形需要赠与人有足够的证据证明。
附条件赠与：如果男方是以结婚等特定条件为目的给予女方钱款，而最后条件没有达成，男方可以尝试通过诉讼要求女方返还。但需要提供证据证明赠与是附条件的以及该条件未达成。
二. 借款性质的情况
如果男方给女方钱时，双方明确是借款关系，即使没有书面的借条，只要有其他证据（例如聊天记录表明借款的合意、转账时的备注等）能证明借款事实存在，男方可以要求女方归还借款。
三. 其他特殊情况
误解、欺诈或胁迫：如果男方是因为误解、被欺诈或被胁迫而自愿转钱给女方，转账人有权通过起诉撤销转账行为，要求女方返还钱款。
不当得利：如果女方没有法定或约定的合法依据而取得利益，同时使男方遭受损失，构成不当得利。在这种情况下，男方可以以不当得利为由起诉女方，要求返还大额款项。
综上所述，男方能否要回自愿给予女方的钱款，需根据转账的性质（赠与、借款或其他）、是否存在法定的撤销情形、是否有足够的证据证明等因素来判断。
我的观点是，如果男方无法提供足够的证据证明存在上述特殊情形，那么一般情况下，他是无法要求女方返还自愿给予的钱款的。如有进一步需要，您可以继续咨询我。