结论：关于协议中“男的不要女的彩礼钱一分不退，现在男方后悔”的情况，不能简单地判定是谁的错，这取决于协议的具体内容、签订时的双方真实意思表示以及是否存在可撤销或无效的情形。以下从不同角度进行分析：
一、协议内容合法有效的情况
双方自愿签订：如果协议是双方在自愿、平等、公平的基础上签订的，且内容不违反法律、行政法规的强制性规定，不违背公序良俗，那么该协议是合法有效的。在这种情况下，男方后悔要求退还彩礼，女方有权拒绝，因为男方已经自愿放弃了彩礼的退还权利。
无欺诈、胁迫等情形：如果协议签订时，不存在欺诈、胁迫等导致协议可撤销的情形，那么男方后悔并不能改变协议的效力。男方需要承担自己签订协议所带来的法律后果。
二、协议存在可撤销或无效情形的情况
欺诈、胁迫：如果男方在签订协议时，受到了女方的欺诈或胁迫，导致其在非真实意思表示的情况下签订了协议，那么男方有权请求人民法院或者仲裁机构撤销该协议。撤销后，协议自始无效，男方可以要求女方退还彩礼。
显失公平：如果协议内容显失公平，即一方利用对方处于危困状态、缺乏判断能力等情形，致使民事法律行为成立时显失公平的，受损害方有权请求人民法院或者仲裁机构予以撤销。在这种情况下，如果男方能够证明协议显失公平，也可以要求撤销协议并退还彩礼。
违反法律强制性规定或公序良俗：如果协议内容违反了法律、行政法规的强制性规定，或者违背了公序良俗，那么该协议是无效的。无效的协议自始没有法律约束力，男方可以要求女方退还彩礼。
三、法律建议
审查协议内容：男方应首先仔细审查协议内容，确认是否存在可撤销或无效的情形。如果存在，应及时收集证据并寻求法律帮助。
协商解决：在可能的情况下，双方可以尝试通过协商解决纠纷。协商是解决纠纷的一种高效、低成本的方式，有助于维护双方的关系和利益。
法律途径：如果协商无果，男方可以考虑通过法律途径解决纠纷。可以向人民法院提起诉讼或申请仲裁，要求撤销协议或确认协议无效，并退还彩礼。
进一步思考：在签订类似协议时，双方应充分了解协议内容及其法律后果，确保协议是在自愿、平等、公平的基础上签订的。同时，建议双方在签订协议前咨询专业律师的意见，以避免不必要的法律纠纷。如果您有进一步的法律问题或需要更详细的法律建议，可以直接向我咨询。