结论：协议离婚时男方答应不还彩礼，离婚后一般情况下男方不能起诉要求还彩礼，但也存在例外情况。以下为你详细分析：
一般情况下不能起诉要求还彩礼
从法律层面来讲，彩礼的返还问题通常与是否办理结婚登记手续、是否共同生活以及是否导致给付人生活困难等因素相关。在协议离婚时，双方已经就彩礼问题达成了一致意见，男方明确答应不还彩礼，这属于双方自愿达成的协议内容，对双方都具有法律约束力。只要该协议不存在欺诈、胁迫等法定可撤销或无效的情形，男方就应当遵守协议约定，离婚后不能再起诉要求女方返还彩礼。
例如，小张和小李协议离婚，在离婚协议中明确写明男方小张放弃要求女方小李返还彩礼的权利。之后小张反悔，向法院起诉要求小李返还彩礼，法院一般不会支持小张的诉求，因为离婚协议是双方真实意思表示，小张应当按照协议履行。
存在例外情况可能起诉要求还彩礼
虽然协议离婚时男方答应不还彩礼，但如果存在以下特殊情况，男方有可能在离婚后起诉要求返还彩礼：
- 协议存在可撤销或无效情形：如果男方在签订离婚协议时，存在被欺诈、胁迫等情形，导致其在违背真实意愿的情况下答应不还彩礼，那么男方可以在法定期限内向法院申请撤销该协议中关于彩礼的条款，或者主张整个离婚协议无效。一旦协议被撤销或认定无效，男方就可以要求女方返还彩礼。
- 欺诈：比如女方故意隐瞒重大事实，如女方在婚前就已经患有重大疾病且未告知男方，男方在不知情的情况下签订了不还彩礼的离婚协议，后来发现真相，这种情况下男方可以主张因受欺诈而撤销协议。
- 胁迫：若女方以威胁、恐吓等手段迫使男方签订不还彩礼的离婚协议，男方在胁迫行为终止之日起一年内可以向法院申请撤销该协议。
- 女方存在严重违反协议行为：如果离婚协议中除了彩礼问题，还涉及其他财产分割、子女抚养等事项，而女方存在严重违反协议的行为，损害了男方的合法权益，男方可以以女方违约导致协议目的无法实现为由，主张重新处理彩礼问题。不过，这种情况在实践中认定较为严格，需要男方提供充分的证据证明女方的违约行为与彩礼返还之间存在直接关联。
法律建议
- 保留协议证据：无论是协议离婚时签订的书面离婚协议，还是双方就彩礼问题达成的其他书面或口头约定（最好有书面记录），都要妥善保存。这些证据在后续可能出现的纠纷中至关重要，能够证明双方的真实意思表示。
- 及时咨询律师：如果男方在离婚后反悔想要起诉要求返还彩礼，或者女方担心男方起诉，都可以及时向我咨询。我会根据具体情况分析协议的效力、是否存在可撤销或无效的情形等，为你提供专业的法律意见和应对策略。
总之，协议离婚时男方答应不还彩礼，离婚后能否起诉要求还彩礼不能一概而论，需要结合具体情况进行判断。如果你有相关法律问题，欢迎随时向我咨询。