结论：衣服买小了是否可以退，主要取决于购买时的约定、商家的退货政策以及相关法律法规的规定。若商家拒绝退货，您可以根据具体情况采取相应措施。
详细分析：
购买时的约定：
- 如果在购买时，您与商家有明确的约定，比如“无理由退货”或“在一定期限内可退换”等，那么您有权根据这些约定要求退货。
- 若购买时没有明确约定，则需要参考商家的退货政策以及相关法律法规。
商家的退货政策：
- 许多商家会制定自己的退货政策，这些政策通常会在店铺内公示或包含在购买合同中。
- 如果商家的退货政策中明确规定了因尺寸问题可以退货，那么您有权要求退货。
- 若商家的退货政策中未提及尺寸问题或明确排除了因尺寸问题退货的权利，那么您可能需要依据相关法律法规来争取退货。
相关法律法规：
- 根据《中华人民共和国消费者权益保护法》的相关规定，消费者在购买商品后，有权在合理期限内要求退货、换货或修理，如果商品存在质量问题或不符合约定。虽然“买小”不一定直接等同于“质量问题”，但如果商家在销售时未提供准确的尺寸信息或误导了消费者，消费者可能有权要求退货。
- 此外，如果商家存在欺诈行为，如故意提供错误的尺寸信息，消费者还可以根据《消费者权益保护法》要求商家承担相应的赔偿责任。
若商家拒绝退货，您可以采取以下措施：
与商家协商：
- 首先，您可以尝试与商家进行友好协商，说明您的情况和退货的理由，看是否能够达成退货协议。
向消费者协会投诉：
- 如果协商无果，您可以向当地的消费者协会投诉，寻求他们的帮助和调解。
寻求法律途径：
- 如果商家仍然拒绝退货，且您认为自己的权益受到了侵害，您可以考虑通过法律途径来维护自己的权益，如向法院提起诉讼或申请仲裁。
建议：
- 在购买商品时，务必仔细阅读商家的退货政策，并了解自己的权益和义务。
- 如果可能的话，尽量在购买时与商家明确约定退货条款，以避免后续纠纷。
- 在遇到退货问题时，保持冷静和理性，通过合法途径来维护自己的权益。
如有任何疑问或需要进一步的法律帮助，请随时向我咨询。