村民起诉村委会和第三方以没有召开村民代表会议为由主张合同无效，确实存在时间限制，这主要涉及到诉讼时效的问题。下面我将从多个角度为你详细分析：

一、诉讼时效的基本规定

根据《中华人民共和国民法典》的相关规定，向人民法院请求保护民事权利的诉讼时效期间通常为三年。这意味着，如果村民认为村委会与第三方签订的合同因未召开村民代表会议而无效，他们需要在知道或应当知道这一事实之日起三年内提起诉讼。

二、诉讼时效的起算点

1. 知道或应当知道权利受损之日：诉讼时效一般从村民知道或应当知道其权利受到损害之日起计算。例如，如果村民在合同签订后的一段时间内才发现未召开村民代表会议，那么诉讼时效就从他们发现这一事实之日起计算。
2. 特殊情况下的起算点：在某些特殊情况下，如合同签订时村民就明确知道未召开村民代表会议，但出于某种原因未立即提起诉讼，那么诉讼时效可能从合同签订之日起计算。不过，这种情况较为少见，且需要具体证据支持。

三、诉讼时效的中断与中止

1. 诉讼时效中断：在诉讼时效期间内，如果村民向村委会或第三方提出过履行请求、村委会或第三方同意履行义务，或者村民提起诉讼或申请仲裁等，都可能导致诉讼时效中断。中断后，诉讼时效期间重新计算。
2. 诉讼时效中止：在诉讼时效期间的最后六个月内，如果因不可抗力或其他障碍不能行使请求权，诉讼时效中止。自中止时效的原因消除之日起满六个月，诉讼时效期间届满。

四、超过诉讼时效的法律后果

如果村民在诉讼时效期间内未提起诉讼，且不存在诉讼时效中断或中止的情形，那么一旦诉讼时效期间届满，村民将失去通过诉讼保护其权利的机会。也就是说，即使他们确实认为合同无效，法院也可能因诉讼时效已过而不予支持。

五、实际操作建议

1. 及时咨询律师：如果你作为村民认为合同无效，建议尽快咨询专业律师，了解具体的诉讼时效起算点、中断与中止情形等。
2. 收集证据：在提起诉讼前，务必收集好相关证据，如合同文本、村民代表会议记录（或未召开的证明）、村民的知情情况等。
3. 及时提起诉讼：在确认诉讼时效未过且证据充分的情况下，及时向法院提起诉讼，以维护自己的合法权益。

总结来说，村民起诉村委会和第三方以没有召开村民代表会议为由主张合同无效，确实存在时间限制，即诉讼时效期间。为了确保自己的权利得到有效保护，建议村民在知道或应当知道权利受损之日起三年内及时提起诉讼，并咨询专业律师以获取更具体的法律建议。如果你有任何进一步的法律问题或需要更详细的解释，请随时向我咨询。