如退回商品的数量与商家发货时不符，且商家意图起诉，你应积极应诉并准备相应的证据材料。以下是我对你的建议：

一. 核查退货情况

1. 确认退货数量：首先，你需要核对退货时的商品数量，确保与商家发货时的数量一致。如果确实存在数量不符的情况，你需要找出原因，是否是在退货过程中出现了遗漏或错误。
2. 收集证据：收集退货时的物流单据、商品照片、视频等证据，以证明你退货时的商品数量。这些证据在后续的诉讼过程中将起到关键作用。

二. 了解商家起诉的法律依据

1. 诉讼时效：根据《中华人民共和国民法典》第一百八十八条，向人民法院请求保护民事权利的诉讼时效期间为三年。商家需要在这一期限内提起诉讼，否则将丧失胜诉权。
2. 起诉理由：商家起诉你通常是因为认为你退货时商品数量不符，导致其遭受损失。因此，你需要了解商家具体的起诉理由和依据，以便有针对性地应诉。

三. 积极应诉

1. 聘请律师：如果你对法律程序不熟悉，建议聘请专业律师代理应诉。律师将帮助你分析案情，准备证据材料，并代表你出庭辩护。
2. 准备答辩材料：根据商家的起诉理由和依据，你需要准备相应的答辩材料。重点阐述你退货时的商品数量与商家发货时一致，或者说明数量不符的原因并非你方过错。
3. 出庭应诉：在收到法院传票后，你需按时出庭应诉。在法庭上，你要保持冷静，如实陈述事实，并提供相关证据支持你的观点。

四. 后续处理

1. 等待判决：在庭审结束后，法院将依法作出判决。如果你对判决结果不服，可以在规定期限内提起上诉。
2. 履行判决：如果判决结果要求你承担相应责任，你需要按照判决来履行。如果判决结果证明你无过错，你则无需承担任何责任。

我建议，在整个过程中，你要保持与商家的沟通，尝试通过协商解决问题。如果协商无果，再采取法律手段维护自己的合法权益。同时，也要保留好所有相关证据，以备不时之需。如有进一步需要，您可以继续咨询我。