结论：实体店买衣服不给退是否合法，需根据具体情况来判断。若衣服存在质量问题或商家有承诺无理由退货但拒绝履行，则商家行为违法；反之，若衣服无质量问题且商家未承诺无理由退货，则商家拒绝退货是合法的。
详细分析：
一、商家合法拒绝退货的情形
消费者原因且符合商家规定：
- 如果商家在销售时已经明确告知了退换货规则，比如在店铺显著位置张贴了“一经售出，非质量问题不予退换”的告示，并且消费者在购买时对此表示了认可，那么在衣服没有质量问题的情况下，商家有权依据双方约定拒绝退货。这种约定只要不违反法律法规的强制性规定，就是有效的。
- 若消费者因个人喜好（如款式、颜色等）要求退货，且衣服无质量瑕疵并已被正常穿着或洗涤，可能影响二次销售，商家也可依据事先约定或商业惯例拒绝退货。
商品特殊性质：
- 对于定制服装等具有唯一性的特殊商品，由于其无法二次销售，商家通常在定制前会告知消费者不接受退货。在此情况下，商家拒绝退货是合法的。
无质量问题且无无理由退货承诺：
- 如果购买的衣服没有质量问题，且商家没有明确承诺无理由退货，那么商家拒绝退货是合法的，因为商家没有违反任何法律规定或双方约定。
二、商家不合法拒绝退货的情形
商品存在质量问题：
- 根据《中华人民共和国消费者权益保护法》的相关规定，如果衣服存在质量问题（如面料瑕疵、染色不均、开线等），影响了正常穿着，消费者有权要求退货。此时，商家拒绝退货是不合法的。
商家未履行告知义务或承诺无理由退货：
- 如果商家在销售时没有明确告知消费者退换货政策，或故意隐瞒相关信息，导致消费者在不知情的情况下购买了衣服，后来消费者因合理原因要求退货时，商家不能以没有事先约定为由拒绝退货，否则即为不合法。
- 若商家已承诺无理由退货，但拒绝履行退货义务，同样构成违法行为。
三、消费者维权途径
当商家拒绝履行合法的退货义务时，消费者可以通过以下途径来维护自己的合法权益：
与商家协商：
- 首先尝试与商家进行友好协商，说明退货原因，寻求解决方案。
向消费者协会投诉：
- 若协商无果，可向当地消费者协会投诉，提供购物凭证和详细情况，寻求帮助和支持。
向行政部门举报：
- 消费者还可向相关行政部门（如工商部门）举报商家的违法行为，提交购物凭证、商品照片及诉求信息，以便行政部门介入处理。
提起诉讼：
- 在必要时，消费者可选择通过法律途径解决争议，向法院提起诉讼，要求商家退款并主张因维权产生的合理费用。
建议：在购买衣服时，消费者应仔细了解商家的退换货政策，并保留好购物凭证。若遇到商家拒绝合法退货的情况，应及时采取适当的措施维护自己的合法权益。如果你有具体的法律问题或需要进一步的法律帮助，可以直接向我咨询。