结论：在女方曾有卖淫行为，男方婚后才发现并提出离婚的情况下，能否要求退还彩礼，需根据具体情况来判断，一般情况下，若双方已办理结婚登记手续并共同生活，彩礼通常不予退还；但若存在特殊情形，如双方未共同生活或因彩礼导致男方生活困难，则可能支持退还彩礼的请求。以下是对此问题的详细分析：
一、彩礼退还的一般原则
根据《最高人民法院关于适用〈中华人民共和国民法典〉婚姻家庭编的解释（一）》第五条的规定，当事人请求返还按照习俗给付的彩礼的，如果查明属于以下情形，人民法院应当予以支持：
- 双方未办理结婚登记手续；
- 双方办理结婚登记手续但确未共同生活；
- 婚前给付并导致给付人生活困难。
二、针对本案例的具体分析
若双方已办理结婚登记手续并共同生活：
- 在此情况下，即使女方曾有卖淫行为，且男方婚后才发现，这并不直接构成彩礼退还的法定理由。因为双方已经完成了结婚登记，并开始了共同生活，彩礼的目的（即缔结婚姻关系）已经实现。
- 除非男方能证明因给付彩礼导致其生活困难，且这种困难是婚前给付彩礼直接导致的，否则法院通常不会支持退还彩礼的请求。
若双方虽办理结婚登记手续但未共同生活：
- 如果双方虽然办理了结婚登记，但实际上并未共同生活，那么彩礼的目的（即共同生活）并未实现。在此情况下，男方有权要求退还彩礼。
- 女方曾有卖淫行为的事实，虽然可能影响双方的感情和婚姻的稳定性，但并不直接影响彩礼退还的请求。关键在于双方是否共同生活。
若婚前给付彩礼导致男方生活困难：
- 如果男方能证明因婚前给付彩礼导致其生活困难，且这种困难是婚前给付彩礼直接导致的，那么无论双方是否共同生活，男方都有权要求退还彩礼。
- 女方曾有卖淫行为的事实，可能作为男方生活困难的一个间接因素（如导致男方精神压力增大、影响工作等），但并非直接原因。因此，在证明生活困难时，需要提供充分的证据来支持这一主张。
三、其他考虑因素
- 女方卖淫行为对婚姻的影响：虽然女方曾有卖淫行为可能对婚姻关系产生负面影响，但这并不直接构成彩礼退还的法定理由。婚姻关系的稳定性和彩礼退还的问题需要分开考虑。
- 道德因素：在处理此类案件时，法院也会考虑道德因素。然而，道德因素通常不会直接决定法律判决的结果，而是作为辅助判断的依据之一。
四、建议
- 收集证据：如果男方希望要求退还彩礼，应尽可能收集相关证据来支持其主张，如双方未共同生活的证据、因给付彩礼导致生活困难的证据等。
- 咨询专业律师：由于每个案件的具体情况都不同，因此建议男方在提出退还彩礼的请求前，先咨询专业律师的意见。律师可以根据案件的具体情况提供针对性的法律建议和帮助。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。