关于“小三直接退回钱财给男方，法院怎么判”的问题，这并非一个简单的单一结论问题，而是需要结合具体案情和法律规定来综合分析。以下是我从不同角度给出的详细解答：

1. 钱财性质与来源：

   • 首先，需要明确这笔退回的钱财的性质和来源。如果这笔钱财是男方在婚姻关系存续期间，未经配偶同意，擅自赠与给“小三”的夫妻共同财产，那么“小三”的退回行为可能只是恢复了财产的原状，但并不影响法院对男方擅自处分夫妻共同财产行为的认定。
   • 如果这笔钱财是男方的个人财产，那么“小三”的退回行为则主要涉及到男方与“小三”之间的债权债务关系，与夫妻共同财产无直接关联。

2. 法院判决的考量因素：

   • 夫妻共同财产的保护：如果涉及夫妻共同财产，法院会优先考虑保护夫妻共同财产的完整性和配偶的合法权益。男方擅自处分夫妻共同财产的行为可能被认定为无效，法院可能会判决“小三”返还全部或部分财产给男方及其配偶。
   • 证据的充分性：法院在判决时会考虑证据的充分性。如果男方或其配偶能够提供充分的证据证明钱财的性质、来源以及男方的擅自处分行为，那么法院将更有可能支持其诉求。
   • “小三”的主观意图：虽然“小三”直接退回了钱财，但法院在判决时仍会考虑其主观意图。如果“小三”明知钱财是夫妻共同财产而仍然接受，并在事后退回，这可能不会完全免除其法律责任，尤其是在涉及恶意串通或损害他人利益的情况下。

3. 可能的法律后果：

   • 如果钱财是夫妻共同财产：法院可能会判决“小三”返还全部或部分财产给男方及其配偶，并可能根据具体情况对男方进行一定的法律制裁，如警告、罚款等（但通常罚款等行政处罚不直接由法院在民事判决中作出，而是可能通过其他法律程序进行）。
   • 如果钱财是男方的个人财产：法院可能会确认“小三”的退回行为有效，并结束相关纠纷。但如果“小三”在接受钱财时存在欺诈、胁迫等违法行为，男方仍有权通过法律途径追究其责任。

4. 建议与注意事项：

   • 收集证据：无论钱财性质如何，收集充分的证据都是至关重要的。这包括转账记录、聊天记录、证人证言等，能够证明钱财的性质、来源以及男方的擅自处分行为。
   • 咨询专业律师：由于每个案件的具体情况都不同，因此建议男方或其配偶在涉及此类纠纷时，及时咨询专业律师以获取针对性的法律建议。
   • 理性处理纠纷：在处理此类纠纷时，应保持理性，避免情绪化行为。通过法律途径解决纠纷是最有效、最合法的方式。

总结来说，法院对“小三直接退回钱财给男方”的判决将取决于钱财的性质、来源、证据的充分性以及“小三”的主观意图等多个因素。因此，无法给出一个简单的、一概而论的结论。如果你或你身边的人正面临此类纠纷，建议直接向我咨询以获取更具体、更专业的法律建议。