结论前置：在女方不会生育且男方因此要求退还彩礼而女方不退的情况下，若双方未办理结婚登记、已登记但未共同生活或婚前给付导致男方生活困难，男方有权起诉要求退还彩礼，此时若女方不退，从法律程序上来说，是女方在拒绝履行可能的退还义务，但具体责任归属需根据法院判决来确定。

详细分析：

1. 起诉主体与相对方

   • 起诉主体：在彩礼纠纷中，通常是由给付彩礼的男方（及其父母，如果彩礼主要由他们出资）作为原告，因为他们是彩礼的直接给付人，与彩礼返还问题具有直接利害关系。
   • 相对方：接受彩礼的女方（及其父母，如果彩礼被交付给他们或他们实际占有彩礼）则作为被告。

2. 彩礼返还的法定情形

   • 根据相关法律规定，以下三种情形之一，男方可以要求退还彩礼：
     1. 双方未办理结婚登记手续；
     2. 双方办理了结婚登记手续但确未共同生活；
     3. 婚前给付并导致给付人生活困难。
   • 在您描述的情况中，如果双方未办理结婚登记，或者虽然办理了登记但未共同生活，或者婚前给付彩礼导致男方生活困难，且女方不会生育成为双方分手的直接原因，那么男方有权要求退还彩礼。

3. 法律责任与后果

   • 如果女方在符合上述法定情形的情况下拒绝退还彩礼，男方可以通过法律途径起诉女方，要求法院判决女方退还彩礼。
   • 法院将根据双方提供的证据和法律规定，判断女方是否应当退还彩礼以及退还的金额。如果法院判决女方退还彩礼而女方仍拒绝执行，男方可以申请法院强制执行。
   • 需要注意的是，如果双方已经办理了结婚登记并共同生活，且彩礼的给付并未导致男方生活困难，那么即使女方不会生育，男方也可能无法要求退还彩礼。因为此时彩礼的给付已经转化为双方共同生活的一部分，且生育能力并非婚姻关系的唯一或决定性因素。

4. 建议与行动

   • 在决定起诉前，男方应准备好相关证据材料，如彩礼的给付凭证（如转账记录、收据等）、双方的聊天记录或其他能证明彩礼给付及要求返还事实的证据。
   • 鉴于具体案件可能存在特殊性，我建议男方在起诉前先向我详细咨询，以便更准确地评估案件情况、制定诉讼策略，并更好地维护自己的合法权益。

总结：在女方不会生育且男方因此要求退还彩礼而女方不退的情况下，如果符合彩礼返还的法定情形，男方有权起诉要求退还彩礼。具体责任归属需根据法院判决来确定。如果您或您身边的人遇到类似情况，欢迎向我咨询，我将为您提供专业的法律帮助。