结论：上午购买的衣服下午商家不给退，能否退货主要取决于商家是否明确告知了退换货政策、商品是否存在质量问题以及购买时双方的具体约定。以下从不同情况为您详细分析：

1. 商家有明确退换货政策且您已知情：

   • 如果商家在销售时明确告知了退换货政策，比如“非质量问题不退不换”，并且您在购买时已经知晓并同意了这一政策，那么商家拒绝退货是合理的。因为这种情况下，双方已经就退换货事宜达成了合意，商家有权按照约定执行。

2. 商家未明确告知退换货政策或政策不合理：

   • 如果商家没有明确告知退换货政策，或者其政策违反了法律法规的强制性规定（比如，规定了极短的退换货期限且未给予消费者合理的考虑时间），那么这样的政策可能是无效的。在这种情况下，您有权要求商家按照法律法规的规定进行退换货。
   • 根据《消费者权益保护法》的相关规定，消费者在购买商品后，有权在合理期限内要求退货、换货或修理，特别是当商品存在质量问题时。如果商家拒绝，您可以通过与商家协商、向消费者协会投诉或向市场监管部门举报等方式来维护自己的权益。

3. 商品存在质量问题：

   • 无论商家是否有明确的退换货政策，如果商品存在质量问题，您都有权要求商家进行退货、换货或修理。这是《消费者权益保护法》赋予消费者的基本权利。如果商家拒绝，您可以收集相关证据（如商品照片、购买凭证等），并通过法律途径来维护自己的权益。

4. 购买时双方有特殊约定：

   • 如果在购买时，您与商家之间有特殊的约定（比如，商家同意在一定条件下可以退货），那么商家应当按照约定执行。如果商家拒绝，您可以依据约定要求商家履行义务。

建议：

• 首先，您可以尝试与商家进行友好协商，说明您的诉求和理由，看是否能够达成一致意见。
• 如果协商无果，您可以向当地的消费者协会或市场监管部门投诉，寻求他们的帮助和支持。
• 如果问题仍然无法解决，您可以考虑通过法律途径来维护自己的权益，比如向法院提起诉讼或申请仲裁。

后续行动：

• 在处理此类问题时，建议您保留好相关证据（如购买凭证、商品照片、与商家的沟通记录等），以便在需要时能够证明自己的权益。
• 如果您对法律法规不太了解，或者担心自己的权益无法得到有效维护，可以随时向我咨询，我会根据您的具体情况为您提供专业的法律建议。