结论：针对您“退回去的衣服卖家说脏了不给退”的情况，能否退货取决于衣服是否确实存在脏污问题、脏污是否由您造成以及合同中是否有相关约定等多个因素。以下从不同角度为您详细分析：
一、衣服脏污问题的责任归属
若脏污由您造成：
- 如果衣服在退回前确实因为您的使用或保管不当而变脏，那么卖家有权拒绝退货。因为根据《中华人民共和国民法典》的相关规定，买方在退货时应当保证商品完好无损，不影响二次销售。
- 建议：在这种情况下，您可以尝试与卖家协商，看是否可以通过清洗或赔偿等方式解决纠纷。
若脏污非由您造成：
- 如果衣服在退回前并未脏污，或者脏污是由于卖家在运输、保管等过程中造成的，那么卖家无权拒绝退货。
- 建议：您可以要求卖家提供证据证明脏污是由您造成的，如果卖家无法提供，您可以坚持要求退货，并考虑向消费者协会或相关监管部门投诉。
二、合同中的相关约定
若合同中有明确约定：
- 如果您与卖家签订的货物买卖合同中明确约定了退货的条件和流程，包括商品完好无损的标准等，那么应当按照合同约定执行。
- 建议：仔细审查合同条款，看是否有关于退货时商品状态的具体要求。如果有，且您符合退货条件，但卖家仍拒绝退货，您可以依据合同条款向卖家主张权利。
若合同中无明确约定：
- 如果合同中没有明确约定退货时商品的状态要求，那么根据《中华人民共和国消费者权益保护法》的相关规定，消费者在购买商品后享有七天无理由退货的权利（部分商品除外），但应当保证商品完好。
- 建议：在这种情况下，您可以参考相关法律法规，与卖家协商退货事宜。如果卖家仍拒绝退货，您可以考虑通过法律途径解决纠纷。
三、实际操作中的建议
保留证据：
- 在退货前，建议您对衣服进行拍照或录像，以证明衣服在退回前的状态。这样，在发生纠纷时，您可以提供有力的证据支持自己的主张。
与卖家沟通：
- 尝试与卖家进行友好沟通，说明情况并表达退货的意愿。在沟通过程中，保持冷静和理性，避免情绪化的言辞。
寻求第三方帮助：
- 如果与卖家沟通无果，您可以考虑向消费者协会、相关监管部门或电商平台投诉，寻求第三方的帮助和调解。
考虑法律途径：
- 如果纠纷无法通过协商或调解解决，您可以考虑通过法律途径维护自己的合法权益。在这种情况下，建议您咨询专业律师（即我本人，兖光辉律师，专注于刑事辩护、合同纠纷领域），以获取更具体的法律建议和帮助。
最后，希望以上分析能对您有所帮助。如果您在处理此类纠纷过程中遇到任何问题或需要进一步的法律咨询，请随时向我提问。