若村委会无正当理由收回承包非耕地，该行为违法，您有权拒绝并要求继续履行承包合同；若存在法定收回情形，您可依法主张补偿。以下是具体分析：

一、村委会收回承包非耕地的合法性判断

1. 法定收回情形
   根据《农村土地承包法》第二十七条，承包期内发包方（村委会）不得收回承包地，但存在以下例外：

   • 承包方自愿交回承包地（需书面申请）；
     
   • 承包方全家迁入设区的市并转为非农业户口，且未交回承包地的，发包方可收回；
     
   • 承包地因自然灾害严重毁损等特殊情形，按法定程序调整。
     若村委会以“非耕地用途变更”“政策调整”等非法定理由收回，属于违法行为。

2. 程序合法性
   即使存在法定收回情形，村委会也需履行民主议定程序（如村民会议或村民代表会议表决），并报乡（镇）人民政府批准。未履行程序的收回行为无效。

二、您的权利与应对措施

1. 拒绝非法收回
   若村委会无合法理由或程序违法，您可明确拒绝交回土地，并要求继续履行承包合同。必要时可向乡镇政府或县级农业农村部门投诉。

2. 主张补偿权利
   若因公共利益需要（如修建道路、学校等）依法收回，您有权要求合理补偿，包括土地补偿费、安置补助费等。补偿标准可参考当地政府公布的征地区片综合地价。

3. 法律救济途径

   • 协商：与村委会沟通，要求出具书面收回依据及补偿方案；
     
   • 调解：申请乡（镇）人民政府或农村土地承包仲裁委员会调解；
     
   • 诉讼：向法院提起民事诉讼，确认收回行为违法或主张补偿。

三、实务建议

1. 核查承包合同：确认合同中是否约定收回条款及违约责任；
   
2. 固定证据：保留土地现状照片、村委会通知文件、沟通记录等；
   
3. 及时行动：若收到收回通知，应在法定期限内（如60日内）申请仲裁或起诉，避免超期失权。

如有进一步疑问，可直接向我提问，我会结合具体案情为您详细分析。