淘宝卖家提供虚假退货地址，可能面临工商部门的罚款，以及承担对消费者的赔偿责任。具体分析如下：

一. 工商部门的罚款

1. 违规行为的认定：根据淘宝平台的规定及工商部门的要求，商家应提供真实有效的经营地址。若卖家提供虚假退货地址，且工商部门上门核实未发现该地址有人经营，或现场拨打电话无人接听，此行为将被视为违规。
2. 罚款金额：根据相关规定，卖家因提供虚假地址导致的罚款金额通常为五千元以上三万元以下，上缴国库。这是针对卖家提供虚假信息以逃避监管的明确处罚。

二. 对消费者的赔偿责任

1. 消费者权益受损：若卖家提供虚假退货地址，消费者可能无法顺利退货，导致其权益受损，如货款无法退还、商品无法退换等。
2. 赔偿责任：根据《消费者权益保护法》的相关规定，卖家应承担因提供虚假信息而导致的消费者损失赔偿责任。消费者有权要求卖家退还货款、赔偿损失，并可能获得相应的惩罚性赔偿。

我建议：淘宝卖家应严格遵守平台规定及法律法规，提供真实有效的退货地址。这样不仅可以避免工商部门的罚款，还能维护消费者的合法权益，提升店铺的信誉和口碑。如有进一步需要，您可以继续咨询我。