拒绝退赔可能会面临民事赔偿责任的加重、行政处罚以及刑事责任的追究等后果，具体分析如下：

一、民事赔偿责任加重

在合同纠纷中，如果一方存在违约行为，按照合同约定或法律规定，违约方通常需要承担退赔责任。如果违约方拒绝退赔，这可能被视为对违约责任的进一步违反，从而加重其民事赔偿责任。例如，在买卖合同中，如果卖方交付的货物存在质量问题，买方有权要求退货并获得赔偿。如果卖方拒绝退赔，买方可能会通过法律途径追究卖方的责任，要求卖方承担更高的赔偿金额，包括但不限于货物价款、运费、鉴定费、律师费等因违约行为产生的直接和间接损失。

二、行政处罚

在某些情况下，拒绝退赔还可能面临行政处罚。这主要发生在涉及消费者权益保护、市场监管等领域的合同纠纷中。例如，根据《中华人民共和国消费者权益保护法》的相关规定，经营者提供商品或者服务有欺诈行为的，应当按照消费者的要求增加赔偿其受到的损失，增加赔偿的金额为消费者购买商品的价款或者接受服务的费用的三倍；增加赔偿的金额不足五百元的，为五百元。如果经营者拒绝退赔，消费者可以向相关行政部门投诉，行政部门有权对经营者进行处罚，包括但不限于罚款、没收违法所得、责令停业整顿等。

三、刑事责任追究

在极端情况下，拒绝退赔还可能构成犯罪，面临刑事责任的追究。这主要发生在涉及诈骗、合同诈骗等刑事犯罪的合同纠纷中。例如，如果一方以非法占有为目的，在签订、履行合同过程中，骗取对方当事人财物，数额较大的，可能构成合同诈骗罪。在这种情况下，如果犯罪嫌疑人拒绝退赔，将面临更严厉的刑事处罚，包括有期徒刑、拘役、罚金等。

建议与提醒

1. 遵守合同约定：在签订合同时，双方应明确约定各自的权利和义务，包括退赔责任等。一旦发生纠纷，应首先按照合同约定进行处理。
2. 积极沟通协商：在发生纠纷后，双方应积极沟通协商，寻求妥善解决方案。如果一方拒绝退赔，另一方可以通过法律途径追究其责任。
3. 保留证据：在处理合同纠纷时，双方应保留好相关证据，如合同文本、交易记录、沟通记录等。这些证据在后续的法律程序中可能起到关键作用。

如果您在合同纠纷中遇到拒绝退赔的情况，或者有任何其他法律问题，都可以直接向我咨询，我会根据您的具体情况提供专业的法律建议。