关于起诉离婚时彩礼要回的时间限制问题，这确实是一个涉及法律程序的重要方面。根据我国《民法典》的相关规定，起诉返还彩礼确实存在时间限制，这主要遵循民事权利保护诉讼时效的相关规定。

一、一般诉讼时效规定

首先，根据《民法典》第一百八十八条，向人民法院请求保护民事权利的诉讼时效期间为三年。这一规定同样适用于彩礼返还纠纷。具体来说，如果给付彩礼的一方发现自己的权利受到损害，比如双方未办理结婚登记而接受彩礼的一方拒绝返还，或者双方虽办理结婚登记但未共同生活且在离婚时对方不返还彩礼，又或是婚前给付彩礼导致给付人生活困难而在离婚时对方不返还等情况，此时给付彩礼方就知道或应当知道自己的权利被侵害了。从这一刻起，三年的诉讼时效期间开始计算。

二、诉讼时效的特殊情形

1. 诉讼时效中断：

   • 在诉讼时效期间进行中，如果发生一定的法定事由，如给付彩礼方通过书面、口头等方式向对方主张返还彩礼，或者向有关部门请求权利救济（如向人民调解委员会申请调解）等行为，可以导致诉讼时效中断。从中断时起，诉讼时效期间将重新计算。

2. 诉讼时效中止：

   • 在诉讼时效期间的最后六个月内，如果因不可抗力、无民事行为能力人或者限制民事行为能力人没有法定代理人，或者法定代理人死亡、丧失民事行为能力、丧失代理权等法定障碍而不能行使请求权，诉讼时效将中止。自中止时效的原因消除之日起满六个月，诉讼时效期间届满。

三、实际操作建议

由于诉讼时效问题涉及法律程序的复杂性，且具体的诉讼时效期间可能会因案件的具体情况而有所不同，因此在实际操作中，我建议您尽快咨询专业的律师。律师能够根据您的具体案情，为您提供更准确的法律分析和建议，确保您的权利得到有效保护。

总结：

起诉离婚时关于彩礼要回确实存在时间限制，一般诉讼时效期间为三年。但请注意，在特定情况下，诉讼时效可能发生中断、中止等情形。因此，在处理此类纠纷时，您应充分了解并合理运用相关法律规定，以维护自己的合法权益。及时咨询专业律师是明智的选择，他们能够为您提供具体的法律指导和帮助。