买家穿过的衣服退回来是否违法，主要取决于退货的具体情况和双方的约定。下面我将从几个角度详细分析这个问题：

1. 合同约定情况：

   • 如果买卖双方在购买时明确约定了退货政策，比如是否接受穿过的衣服退货，那么双方应当遵循这一约定。
   • 如果合同（如购买协议、退货政策等）中明确规定穿过的衣服不得退货，那么买家退回穿过的衣服就可能构成违约。

2. 商品性质与退货原因：

   • 对于某些特定类型的商品，如贴身衣物、定制商品等，由于其特殊性，一般不接受退货，特别是已经穿过的商品。
   • 如果退货是因为商品存在质量问题或者与样品不符，那么即使买家已经穿过，仍然有权要求退货。

3. 法律法规与消费者权益：

   • 根据相关法律法规，消费者在购买商品后享有一定的退货权，但这一权利通常受到商品性质、退货期限、退货条件等限制。
   • 如果买家在合理期限内，因为正当理由（如商品质量问题）要求退货，且退货符合相关法律法规的规定，那么退货行为就不违法。

4. 商家政策与行业惯例：

   • 不同的商家可能有不同的退货政策，有些商家可能出于客户满意度的考虑，接受穿过的衣服退货。
   • 行业惯例也可能对退货政策产生影响，但并非强制性规定，具体还需看买卖双方的约定。

综上所述，买家穿过的衣服退回来是否违法，并没有一个绝对的答案。它取决于买卖双方的约定、商品的性质、退货的原因、相关法律法规以及商家的政策与行业惯例。因此，在实际操作中，建议买家在退货前仔细阅读购买协议和退货政策，与商家进行充分沟通，以确保自己的退货行为符合相关规定。如果有任何疑问或争议，可以及时向我咨询，我会根据你的具体情况提供专业的法律建议。