原配在某些情况下可以要回男人以还钱名义给小三的钱。具体分析如下：
若款项为夫妻共同财产：夫妻在婚姻关系存续期间所得财产一般属于夫妻共同财产，夫妻对共同财产有平等的处理权。若男人未经原配同意，擅自将夫妻共同财产以还钱名义赠与小三，这种赠与行为侵犯了原配对共同财产的合法权益，且违背公序良俗，该赠与行为通常被认定为无效。原配作为财产共有人，有权以自己的名义向法院起诉，要求小三返还全部赠与财产。
若款项为男方个人财产：若该款项属于男方的个人财产，并且男方是怀着赠与的心意做出的表示，赠与行为已经完成，那么小三获取这笔款项就是合法的，原配没有权利要求其返还。
证据收集与诉讼：原配若要追回财产，需收集转账记录、聊天记录等能证明赠与事实和金额的证据，向法院提起诉讼。法院审理后，若认定赠与行为无效，会判决小三返还相应财产。
综上所述，原配能否要回男人以还钱名义给小三的钱，取决于款项的性质（是否为夫妻共同财产）、男方的赠与行为是否有效以及原配是否能提供充分证据等因素。若涉及复杂情况或具体法律问题，建议原配咨询专业律师以获取更详细的法律建议。