关于“消费者权益保护法退一赔三时，东西是否要退回”的问题，我给出以下详细解答：

结论前置：在“退一赔三”的法律框架下，消费者通常需要将商品退回给经营者，但并非绝对，最终是否需要退回商品，可由消费者与经营者双方协商决定。

法律解释：

1. “退一赔三”的含义：

   • “退一”指的是消费者将购买的商品退还给经营者，经营者返还消费者支付的商品价款。
   • “赔三”则是经营者额外按照商品价款或服务费用的三倍给予消费者赔偿。

2. 法律依据：

   • 根据《中华人民共和国消费者权益保护法》第五十五条，经营者提供商品或者服务有欺诈行为的，应当按照消费者的要求增加赔偿其受到的损失，增加赔偿的金额为消费者购买商品的价款或者接受服务的费用的三倍。

3. 法律逻辑与公平原则：

   • 从法律逻辑和公平原则来看，消费者获得赔偿的同时，应将所购商品退还。若消费者不退还商品，却获得价款返还和三倍赔偿，会造成利益失衡。

特殊情况说明：

• 在某些特殊情况下，如商品已无法退回（如已消耗、损坏等），或退回商品对消费者造成极大不便时，消费者与经营者可协商其他解决方案，如仅要求赔偿而不退回商品。但这需要双方达成一致意见。

建议：

• 在主张“退一赔三”时，消费者应首先与经营者进行协商，明确退回商品的具体方式和时间，以及赔偿金的支付方式和期限。
• 如协商不成，消费者可依法向消费者协会投诉或向人民法院提起诉讼，以维护自己的合法权益。

综上所述，虽然“退一赔三”通常要求消费者退回商品，但并非绝对，最终是否需要退回商品应由消费者与经营者双方协商决定。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。