当您购买的衣服存在质量问题而商家拒绝退货时，您可以采取以下措施来依法维护自己的合法权益：

1. 与商家协商：

   • 法律依据：根据《中华人民共和国消费者权益保护法》，消费者在购买商品后，若商品存在质量问题，有权要求商家进行退货、换货或修理。
   • 操作建议：首先，尝试与商家进行友好沟通，明确指出衣服的质量问题，如面料瑕疵、做工粗糙等，并提供购买凭证（如发票、收据）和衣服质量问题的照片或视频作为证据。要求商家按照法律规定办理退货手续。

2. 向购物平台或商场投诉：

   • 电商平台：若您是在网络平台购物，可利用平台的投诉功能，详细描述问题并上传相关证据。电商平台通常有完善的投诉处理机制，会协助您与商家沟通，促成问题的解决。
   • 线下商场：若您是在实体商场购物，可向商场管理部门或客服中心投诉。商场为维护自身信誉，通常会积极协调商家解决问题。

3. 向消费者协会投诉：

   • 投诉方式：若与商家协商无果，您可拨打12315热线或通过全国12315平台网站、微信公众号等渠道投诉。投诉时，需提供准确的个人信息、商家信息、购买情况及问题描述。
   • 消协作用：消费者协会将调查核实情况，并组织双方调解。消协的调解具有权威性和公正性，有助于促使商家妥善解决问题。

4. 寻求行政部门监管：

   • 投诉对象：若消费者协会的调解未能解决问题，您可向当地市场监督管理局投诉。市场监督管理局将依法对商家进行检查和处理，若商家违反法律法规，将面临行政处罚。
   • 投诉内容：在投诉时，需提供详细的购买记录、衣服质量问题的证据、商家的联系方式等信息，以便行政部门进行调查处理。

5. 考虑法律途径：

   • 发送律师函：若上述途径均无效，您可考虑聘请律师向商家发送律师函。律师函将明确告知商家其侵权行为，并要求在规定期限内退货退款。律师函具有威慑力，可能促使商家主动解决问题。
   • 提起诉讼：若商家仍拒绝退货，您可向有管辖权的人民法院提起民事诉讼。在诉讼中，您需提供充分证据证明衣服的质量问题及买卖关系。法院将依据事实和法律作出公正判决，要求商家承担退货、退款等法律责任。

重要提示：

• 在整个维权过程中，保持冷静和理性至关重要。避免情绪化冲突，确保每一步行动都基于法律和事实。
• 保留好所有相关的购物凭证和证据（如发票、收据、聊天记录、商品照片等），这些将是维权过程中的有力支持。

面对衣服质量问题商家不给退的情况，您应积极采取措施维权。从与商家协商到向相关部门投诉，再到考虑法律途径，每一步都需谨慎而坚定地前行。如果您在维权过程中遇到任何问题或需要进一步的法律帮助，请随时向我咨询。