退婚不退彩礼，在法律层面并不直接构成违法行为，但这属于民事财产纠纷。具体来说：

1. 彩礼的退还原则：

   • 彩礼的偿还问题，源于民事领域中的财产纠纷，通常不会进入到刑法规范的范畴。
   • 若双方未办理结婚登记手续，原则上收取彩礼的一方应全额返还彩礼。
   • 若双方已办理结婚登记但未共同生活，或者婚前给付彩礼导致给付人生活困难，在离婚时，男方也可以要求返还彩礼。

2. 法律对彩礼退还的规定：

   • 根据《最高人民法院关于适用<中华人民共和国民法典>婚姻家庭编的解释（一）》第五条，当事人请求返还按照习俗给付的彩礼，如果查明属于以下情形，人民法院应当予以支持：双方未办理结婚登记手续；双方办理结婚登记手续但确未共同生活；婚前给付并导致给付人生活困难。其中，后两种情形需以双方离婚为条件。

3. 不退彩礼的合法性：

   • 退婚不退彩礼是否合法，需根据具体情况判断。若存在双方虽未登记结婚但已共同生活，或彩礼已用于双方共同开支（如筹备婚礼）等情形，不全退彩礼可能合法。
   • 法院在处理此类纠纷时，会综合考虑共同生活时间、彩礼使用情况等因素，判定彩礼的返还数额。

4. 协议书的法律效力：

   • 退婚不退彩礼的协议书通常不具有法律效力，因为法律规定了在特定情形下彩礼应当返还。
   • 签订此类协议书可能违法无效，且可能损害一方的合法权益。

综上所述，退婚不退彩礼并不直接构成违法行为，但属于民事财产纠纷。在处理此类问题时，应依据法律规定和公平原则，通过协商或法律途径解决。若双方无法达成共识，男方有权通过法律途径向女方提起诉讼，请求其归还彩礼。法院将根据实际情况判定彩礼是否需要返还及返还的数额。