结论：男方想要女方退还彩礼是否合法，不能一概而论，需根据具体情况判断。
分析说明：
彩礼的性质与退还条件：
- 彩礼在法律上通常被视为一种附条件的赠与，即以结婚为目的的赠与。若结婚目的未能实现，如双方未办理结婚登记手续，或虽办理结婚登记但确未共同生活，或婚前给付并导致给付人生活困难，那么男方有权要求女方退还彩礼。
- 在您描述的情况中，如果双方只是吃了顿饭就收了彩礼，且之后并未进一步发展关系或办理结婚登记，那么男方要求退还彩礼在法律上是有一定依据的。但具体是否退还，还需考虑双方是否有其他约定、彩礼的数额、双方的经济状况等因素。
双方协商与法律途径：
- 如果双方能够就彩礼退还问题达成一致，那么可以通过协商解决，无需通过法律途径。
- 如果双方无法协商一致，男方可以通过法律途径要求女方退还彩礼。此时，法院会根据双方的具体情况、彩礼的数额、双方的经济状况等因素进行综合判断，并作出裁决。
实际案例与法律适用：
- 在实际案例中，法院通常会考虑双方是否共同生活、彩礼是否用于共同生活开支、双方的经济状况等因素来判断是否应退还彩礼。
- 如果彩礼数额较大，且双方未共同生活或彩礼未用于共同生活开支，那么法院更可能支持男方的退还请求。
法律建议：
- 如果男方想要女方退还彩礼，建议首先与女方进行协商，看是否能够达成一致意见。
- 如果协商无果，男方可以收集相关证据（如彩礼的支付凭证、双方的聊天记录等），并向法院提起诉讼要求女方退还彩礼。
- 在诉讼过程中，男方应如实陈述事实，提供充分的证据支持自己的主张，并遵守法院的诉讼程序和规定。
后续行动与风险提示：
- 如果男方决定通过法律途径要求退还彩礼，应做好充分的准备，包括收集证据、了解法律程序等。
- 同时，男方也应意识到，法律诉讼可能存在一定的风险和不确定性，如证据不足、法院判决不利等。因此，在决定诉讼前，应充分评估风险并做好应对准备。
如有更多关于婚姻家庭方面的法律问题，可以直接向我咨询。