主张合同返还责任确实会受到合同无效期限的限制，但具体限制情况需根据合同无效的原因及法律规定来确定。以下从不同角度为你详细分析：
一、合同无效的一般规定
根据《中华人民共和国民法典》的相关规定，合同无效的情形主要包括：无民事行为能力人实施的民事法律行为无效；行为人与相对人以虚假的意思表示实施的民事法律行为无效；违反法律、行政法规的强制性规定的民事法律行为无效，但是该强制性规定不导致该民事法律行为无效的除外；违背公序良俗的民事法律行为无效；行为人与相对人恶意串通，损害他人合法权益的民事法律行为无效。当合同被认定为无效后，因该合同取得的财产，应当予以返还；不能返还或者没有必要返还的，应当折价补偿。有过错的一方应当赔偿对方由此所受到的损失；各方都有过错的，应当各自承担相应的责任。
二、合同无效后的返还责任期限
诉讼时效角度：
- 主张合同返还责任，实际上是在行使一种请求权，即要求对方返还因合同无效而取得的财产。这种请求权同样受到诉讼时效的限制。
- 根据《中华人民共和国民法典》第一百八十八条，向人民法院请求保护民事权利的诉讼时效期间为三年。法律另有规定的，依照其规定。因此，从知道或应当知道权利被侵害之日起算，三年内未行使请求权的，可能会丧失胜诉权。
特殊情形下的期限限制：
- 在某些特殊情况下，如合同无效是由于一方欺诈、胁迫等手段订立的，受损害方有权请求人民法院或者仲裁机构变更或者撤销合同。但撤销权的行使也有期限限制，根据《中华人民共和国民法典》第一百五十二条，当事人自知道或者应当知道撤销事由之日起一年内、重大误解的当事人自知道或者应当知道撤销事由之日起九十日内没有行使撤销权的，撤销权消灭。虽然这直接规定的是撤销权的期限，但撤销后合同自始无效，返还责任也随之产生，因此也间接影响了返还责任的行使期限。
- 另外，如果合同无效是因为违反法律、行政法规的强制性规定或违背公序良俗，那么返还责任的行使可能不受上述一年或三年期限的严格限制，但仍然需要尽快行使，以避免因时间过长导致证据灭失或对方财产状况恶化等不利后果。
三、实际操作中的建议
- 及时行使权利：一旦发现合同存在无效情形，应尽快与对方协商返还事宜，或向人民法院提起诉讼，以免超过诉讼时效或撤销权行使期限。
- 保留证据：在主张返还责任时，需要提供充分的证据证明合同无效的事实以及对方因合同无效而取得的财产情况。因此，在合同签订、履行过程中，应妥善保管相关证据材料。
- 咨询专业律师：合同无效及返还责任问题涉及复杂的法律关系和证据认定，建议在实际操作中咨询专业律师的意见，以确保自身权益得到有效维护。
总结来说，主张合同返还责任确实会受到合同无效期限的限制，主要包括诉讼时效和撤销权行使期限等方面。因此，在发现合同无效后，应及时行使权利并保留好相关证据材料。如果你在这方面有任何疑问或需要进一步的法律帮助，请随时向我咨询。