当食品不合格时，其处罚对象既可能是厂家也可能是卖家，具体取决于不合格食品问题的责任归属。以下是对此问题的详细解答：

1. 厂家责任与处罚：

   • 厂家作为食品的生产者，对食品的质量负有首要责任。如果食品不合格是由于生产过程中的问题（如原料问题、生产工艺不当、质量控制不严等）导致的，那么厂家将承担主要责任。
   • 处罚措施可能包括责令停止生产、没收违法生产的食品、罚款（货值金额百分之五十以上三倍以下）、吊销生产许可证等。情节严重时，还可能构成犯罪，需依法追究刑事责任。

2. 卖家责任与处罚：

   • 卖家作为食品的销售者，对所售食品的质量也负有直接责任。如果食品在销售过程中因卖家的不当行为（如存储条件不符、销售过期食品、未履行进货查验义务等）导致不合格，卖家将承担责任。
   • 处罚方式可能包括责令停止销售、没收违法销售的食品、罚款、吊销营业执照等。同样，如果情节严重，也可能构成犯罪，需依法追究刑事责任。

3. 双方责任与处罚：

   • 在某些情况下，食品不合格可能是由厂家和卖家共同的责任导致的。例如，厂家生产了存在质量隐患的食品，而卖家在销售过程中未能发现或未采取有效措施防止其流入市场。此时，双方都应受到相应的处罚。
   • 监管部门会根据具体情形，综合考虑双方的过错程度和责任大小，作出公正的处罚决定。

综上所述，食品不合格时的处罚对象并非一成不变，而是根据责任归属来确定的。无论是厂家还是卖家，都应严格遵守相关法律法规，确保食品质量合格，以维护市场秩序和消费者权益。如果您在食品安全方面遇到任何问题或需要进一步的法律咨询，请随时向我提问。