行政复议对被告违法认定的时间限制是存在的。具体来说：
行政复议的申请期限：
- 一般情况下，公民、法人或者其他组织认为具体行政行为侵犯其合法权益的，可以自知道该具体行政行为之日起六十日内提出行政复议申请。
- 但法律规定的申请期限超过六十日的除外，即如果某部特别法规定了更长的申请期限，则应当适用该特别法的规定。
行政复议机关的受理与审查：
- 行政复议机关在收到行政复议申请后，应当在五日内进行审查。对于符合受理条件的，应当受理并书面告知申请人；对于不符合受理条件的，应当决定不予受理，并书面告知申请人不予受理的理由。
- 行政复议机关在对被申请人作出的具体行政行为进行审查时，会考虑该行为是否合法、适当，以及是否存在违法认定等情形。这一审查过程同样受到时间限制，即行政复议机关应当在受理之日起六十日内作出行政复议决定，但法律规定的期限另有规定的除外。
特殊情况下的时间处理：
- 如果案件情况复杂，不能在规定期限内作出行政复议决定的，经行政复议机关的负责人批准，可以适当延长，并告知申请人和被申请人，但延长期限最多不超过三十日。
综上所述，行政复议对被告违法认定的时间限制主要体现在行政复议的申请期限、行政复议机关的受理与审查期限以及特殊情况下的时间处理上。这些时间限制确保了行政复议程序的及时性和有效性，保护了当事人的合法权益。如果你有相关问题或需要进一步的法律帮助，请直接向我咨询。