处理衣服不退不换的规定，在大多数情况下是不合法的。这一结论主要基于《中华人民共和国消费者权益保护法》的相关规定，以下从不同角度进行详细分析：
一、违反公平交易权
根据《消费者权益保护法》第十六条，经营者应诚信经营，不得设定不公平、不合理的交易条件。而“衣服不退不换”的规定，排除了消费者在合理期限内的退换货权利，这实际上构成了一种不公平、不合理的交易条件，侵犯了消费者的公平交易权。
二、属于“霸王条款”
《消费者权益保护法》第二十六条明确禁止经营者以格式条款等方式作出对消费者不公平、不合理的规定。在服装销售中，“衣服不退不换”往往作为店堂告示等格式条款出现，这种条款依法应属无效，因为它限制了消费者的法定权利。
三、商品不符合质量要求时的退换货权利
如果消费者购买的商品不符合质量要求，根据《消费者权益保护法》第二十四条，消费者有权要求退货、更换或修理。在这种情况下，“衣服不退不换”的规定显然无法成立，因为消费者享有法定的退换货权利。
四、特殊销售方式的退换货权利
对于网络、电视、电话、邮购等方式销售的商品，《消费者权益保护法》第二十五条赋予消费者七日无理由退货权。这意味着，在这些销售方式下，消费者即使没有质量问题也有权在七日内退货。因此，“衣服不退不换”的规定在这些情况下同样不合法。
五、特殊情况下的合法性分析
当然，也存在一些特殊情况，使得“衣服不退不换”的规定可能合法。例如：
商品本身性质不适宜退换：如消费者定制的服装，且商家已提前告知并征得消费者同意，则“不退不换”的约定有效。这是因为定制商品按照消费者的特定需求制作，难以进行二次销售。
消费者自身原因导致商品影响二次销售：若消费者人为损坏、严重污损或洗涤商品，影响二次销售，商家有权拒绝退换货。但这种情况下，如果商品本身存在质量问题（如开线、破洞、掉色等），即使试穿也不影响消费者要求退换货的权利。
六、消费者维权途径
如果消费者遇到“衣服不退不换”的不合法规定，可以采取以下维权途径：
保留凭证：在购买时应索取并妥善保存购衣小票等凭证，以便退换货时作为证明。
了解政策：购买前可向店员咨询并了解店铺的退换货政策，避免在不知情的情况下接受不合法规定。
依法维权：若经营者拒绝退换货或达成协议后不履行，消费者可以通过向消费者协会申请调解、向相关行政部门投诉、根据仲裁协议提请仲裁机构仲裁或向人民法院提起诉讼等方式来维护自己的合法权益。
综上所述，处理衣服不退不换的规定在大多数情况下是不合法的。消费者在购买商品时应了解自己的权益和退换货政策，并在必要时依法维护自己的合法权益。如果您在这方面有任何疑问或需要进一步的法律帮助，请随时向我咨询。