新婚夫妻离婚时，彩礼是否要退还男方，这确实是一个比较复杂的问题，需要根据具体情况来判断。以下是我根据法律规定和实际情况，为您做出的详细解答：
一、核心结论
新婚夫妻离婚时，彩礼的退还并非一概而论，而是需依据具体情况进行判定。
二、具体情形分析
若双方未办理结婚登记手续：
- 在此情况下，由于彩礼的目的（即结婚）未达成，男方可要求返还彩礼。
若双方办理了结婚登记手续但未共同生活：
- 离婚时，男方有权请求返还彩礼，因为共同生活目的未达到。
若婚前给付彩礼导致给付人生活困难：
- 此处“生活困难”指的是仅靠个人财产和离婚时分得的财产无法维持当地基本生活水平。若满足此条件，离婚时男方同样有权要求返还彩礼。
其他情形：
- 若双方已共同生活较长时间，且彩礼已用于共同生活或已转化为夫妻共同财产，即使满足上述某些条件，彩礼也可能无需退还。此外，若双方对彩礼归属有明确约定，则按约定处理。
三、法律依据
- 根据相关司法解释，若双方办理结婚登记手续但确未共同生活，或者婚前给付并导致给付人生活困难，离婚时男方请求返还彩礼，法院应予以支持。
四、实际操作建议
- 在处理彩礼退还问题时，建议双方首先进行协商，寻求和解。
- 若协商不成，可寻求法律援助或向法院提起诉讼，由法院根据具体情况进行判决。
综上所述，新婚夫妻离婚时彩礼是否要退还男方，需根据双方是否办理结婚登记、是否共同生活、彩礼给付是否导致生活困难等具体情况来判断。若您在此方面遇到法律问题或需要更详细的解答，请直接向我咨询。