结论：是否需要交违约金取决于合同约定及具体情况，以下分情况说明：

1. 合同有明确约定
   若购买卡时签订的合同中明确约定“中途注销需支付违约金”，且该条款不违反法律强制性规定（如未显失公平、未免除自身责任加重对方义务等），则用户需按合同约定支付违约金。
   法律依据：《民法典》第四百六十五条，依法成立的合同受法律保护，当事人应按约定履行义务。

2. 合同无约定或约定不明
   若合同未约定注销需支付违约金，或条款表述模糊（如“可能产生费用”但未明确金额），则用户无需支付违约金。此时，若商家强行要求支付，可能构成违约或侵权。
   法律依据：《民法典》第五百一十条，合同生效后，当事人就质量、价款等未约定或约定不明的，可协议补充；不能达成补充协议的，按合同相关条款或交易习惯确定。

3. 商家存在过错
   若因商家原因导致无法注销（如系统故障、虚假宣传等），用户有权要求解除合同且无需支付违约金，甚至可主张商家赔偿损失。
   法律依据：《民法典》第五百六十三条，因一方违约导致合同目的无法实现的，另一方可解除合同。

4. 格式条款效力问题
   若“中途注销需支付违约金”属于商家预先拟定的格式条款，且未以显著方式提示用户注意，或存在“免除自身责任、加重对方责任”的情形，该条款可能被认定为无效。
   法律依据：《民法典》第四百九十六条、第四百九十七条，格式条款未提示说明的，对方可主张不成为合同内容；提供方免除责任、加重对方责任等条款无效。

建议：

• 优先核对合同条款，明确违约金约定及生效条件；
  
• 若商家要求支付违约金但无合同依据，可拒绝并要求书面说明理由；
  
• 协商无果时，可向消费者协会投诉或通过诉讼解决。
  

如有具体合同文本或纠纷细节，可进一步提供，我将结合证据分析法律风险。