结论：男人说自愿给的财物，在特定情况下打官司是可能被要回去的，这主要取决于财物的性质、给付的目的以及是否存在法定或约定的撤销情形。以下从不同角度进行详细分析：
一、基于赠与合同的角度
赠与合同的性质：
- 赠与合同是赠与人将自己的财产无偿给予受赠人，受赠人表示接受赠与的合同。若男人自愿给予财物，且双方形成了赠与合同的合意，则该行为受赠与合同法律关系的调整。
赠与合同的撤销：
- 任意撤销权：根据《中华人民共和国民法典》第六百五十八条，赠与人在赠与财产的权利转移之前可以撤销赠与。但经过公证的赠与合同或者依法不得撤销的具有救灾、扶贫、助残等公益、道德义务性质的赠与合同除外。
- 法定撤销权：若受赠人有严重侵害赠与人或者赠与人近亲属的合法权益、对赠与人有扶养义务而不履行、不履行赠与合同约定的义务等情形，赠与人可以撤销赠与。
财物返还：
- 若赠与合同被撤销，赠与人有权要求受赠人返还赠与的财物。
二、基于不当得利的角度
不当得利的定义：
- 不当得利是指没有法律根据，使他人受到损失而自己获得了利益。若男人给予财物并非出于赠与的意思表示，而是由于误解、欺诈、胁迫等原因，则可能构成不当得利。
财物返还请求权：
- 根据《中华人民共和国民法典》第九百八十五条，得利人没有法律根据取得不当利益的，受损失的人可以请求得利人返还取得的利益。
三、基于特殊财物的角度
彩礼的返还：
- 若男人给予的财物属于彩礼性质，且双方未办理结婚登记手续、办理结婚登记手续但确未共同生活、婚前给付并导致给付人生活困难等情形，根据《最高人民法院关于适用〈中华人民共和国民法典〉婚姻家庭编的解释（一）》第五条，男人有权要求返还彩礼。
其他特殊财物：
- 若财物具有特殊意义或价值，如家族传承物品、贵重首饰等，且给付时双方有明确约定或存在特殊情形（如附条件赠与），则可能根据具体约定或法律规定进行返还。
四、实际操作中的考虑因素
证据收集：
- 在打官司要求返还财物时，男人需要收集相关证据证明财物的给付情况、性质以及存在撤销或返还的情形。
诉讼时效：
- 男人需要注意诉讼时效的问题，确保在法定时效期间内提起诉讼。
法律程序：
- 男人需要遵循法律程序，通过合法途径解决纠纷，如协商、调解、仲裁或诉讼等。
建议：若男人认为自愿给予的财物应当返还，建议首先与对方进行协商，看是否能够达成一致意见。若协商无果，可以收集相关证据并咨询专业律师，通过法律途径解决纠纷。如有具体法律问题，可直接向我咨询。