结论：男方在有家庭的情况下签了自愿赠予钱款，是否能要回需视具体情况而定，主要取决于赠与财产的性质、赠与行为是否违背公序良俗以及是否满足法定撤销条件。
分析如下：
赠与财产的性质：
- 个人财产：如果赠与的钱款是男方的个人财产，且赠与行为不违反法律法规的强制性规定，也不违背公序良俗，那么赠与行为在法律上通常是有效的。但若男方在赠与后反悔，想要撤回赠与，除非符合法定撤销条件（如受赠人严重侵害赠与人或其近亲属的合法权益、对赠与人有扶养义务而不履行等），否则一般不能随意要回。
- 夫妻共同财产：如果赠与的钱款属于夫妻共同财产，男方未经配偶同意擅自赠与他人，该赠与行为可能因侵犯配偶的财产权益而无效。在此情况下，男方或其配偶有权要求受赠人返还赠与的钱款。
赠与行为是否违背公序良俗：
- 如果赠与行为涉及婚外情等违背公序良俗的情形，即使赠与的是个人财产，也可能因违反公序良俗而被认定为无效。在此情况下，男方有权要求受赠人返还赠与的钱款。
法定撤销条件：
- 根据《中华人民共和国民法典》的相关规定，赠与人在赠与财产的权利转移之前可以撤销赠与。但经过公证的赠与合同或者依法不得撤销的具有救灾、扶贫、助残等公益、道德义务性质的赠与合同除外。
- 若受赠人有下列情形之一的，赠与人可以撤销赠与：（一）严重侵害赠与人或者赠与人近亲属的合法权益；（二）对赠与人有扶养义务而不履行；（三）不履行赠与合同约定的义务。赠与人的撤销权，自知道或者应当知道撤销事由之日起一年内行使。
建议：
- 如果您是男方，且想要撤回赠与，首先应确认赠与财产的性质以及赠与行为是否违背公序良俗。若赠与的是夫妻共同财产或赠与行为违背公序良俗，您有权要求受赠人返还赠与的钱款。若赠与的是个人财产且不违背公序良俗，但您想要撤回赠与，则需检查是否满足法定撤销条件。
- 如果您是受赠人，且面临男方要求返还赠与钱款的情况，您应核实赠与财产的性质、赠与行为是否有效以及男方是否满足法定撤销条件。若您认为赠与行为有效且男方不满足撤销条件，您有权拒绝返还赠与的钱款。
后续行动：
- 在处理此类纠纷时，建议双方首先尝试通过协商解决。若协商无果，可以寻求法律途径解决争议，如向法院提起诉讼或申请仲裁。
- 在处理过程中，务必保留好相关证据，如赠与合同、转账记录、聊天记录等，以便在争议解决过程中维护自己的合法权益。
如有任何疑问或需要进一步的法律帮助，请随时向我咨询。