结论：买衣服不换货本身并不直接构成违法，但具体是否违法及如何处理需根据实际情况判断，包括商家是否承诺换货、衣服是否存在质量问题等。
详细分析：
商家承诺与实际情况：
- 如果商家在销售时明确承诺了换货服务，并且消费者在购买时也接受了这一条件，那么商家不履行换货承诺就可能构成违约。根据《中华人民共和国民法典》的相关规定，当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。
- 在这种情况下，消费者可以要求商家履行换货承诺，或者要求商家承担违约责任，如赔偿损失等。
衣服质量问题：
- 如果衣服存在质量问题，如破损、色差、尺码不符等，且这些问题在购买时并未被消费者发现或商家未明确告知，那么消费者有权要求商家进行换货或退货。
- 根据《中华人民共和国消费者权益保护法》的相关规定，消费者在购买商品时享有质量保障权，如果商品存在质量问题，消费者可以要求商家进行修理、更换、退货或者赔偿损失等。
无质量问题且无换货承诺：
- 如果衣服没有质量问题，且商家在销售时并未承诺换货服务，那么商家不换货就不构成违法。在这种情况下，消费者需要接受购买的结果，或者尝试与商家协商解决。
处理建议：
- 与商家协商：首先，消费者可以尝试与商家进行友好协商，说明自己的情况和需求，看是否能够达成换货或退货的协议。
- 投诉举报：如果协商无果，消费者可以向当地的消费者协会或者市场监管部门进行投诉举报，寻求他们的帮助和支持。
- 法律途径：如果商家的行为严重侵犯了消费者的合法权益，消费者还可以考虑通过法律途径来维护自己的权益，如向法院提起诉讼等。
后续行动建议：
- 在购买衣服时，消费者应仔细阅读商家的销售条款和承诺，了解自己的权益和义务。
- 如果遇到商家不履行承诺或商品存在质量问题的情况，消费者应及时保留相关证据，如购物凭证、商品照片等，以便在需要时进行维权。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询，我会根据你的具体情况提供专业的法律意见。