针对您提出的“衣服不合格处罚店里还是厂家”的问题，我可以明确告诉您，这取决于具体责任归属。以下是详细分析：

1. 厂家责任：

   • 如果衣服的不合格是由于生产过程中的问题，如设计缺陷、材料不佳或生产工艺不当等导致的，那么厂家将承担主要责任。
   • 处罚措施可能包括责令停止生产、没收违法产品、罚款，直至吊销生产许可证等。情节严重时，还可能构成犯罪，需依法追究刑事责任。

2. 卖家（店里）责任：

   • 如果衣服在销售过程中因卖家的不当行为，如存储条件不符、销售过期产品或以不合格产品冒充合格产品等导致不合格，卖家将承担责任。
   • 处罚方式可能包括责令停止销售、没收违法销售的商品和违法所得、罚款，甚至吊销营业执照。

3. 双方责任：

   • 在某些情况下，衣服不合格可能是由厂家和卖家共同的责任导致的。例如，厂家生产了存在隐患的衣服，而卖家在销售过程中未能发现或未采取适当措施防止其流入市场。
   • 在这种情况下，双方都应受到相应的处罚，监管部门会根据具体情形，综合考虑双方的过错程度和责任大小，作出公正的处罚决定。

综上所述，衣服不合格时的处罚对象可能是厂家，也可能是卖家，或者两者都受处罚。这完全取决于不合格的具体原因和责任归属。如果您面临此类问题，建议详细了解相关法律法规，并咨询专业律师以获取更具体的法律建议。作为专注于合同纠纷、侵权纠纷、房产纠纷领域的律师，我可以为您提供相关的法律咨询和帮助。