非法协议合同是否需要退款，需根据具体情况判断，但通常若合同被认定为非法，退款或追缴违法所得是常见法律后果。以下从不同角度详细分析：

一、非法协议合同的法律性质

非法协议合同，通常指的是因违反法律、行政法规的强制性规定或公序良俗而被认定为无效的合同。根据《民法典》的相关规定，无效的合同自始没有法律约束力，因该合同取得的财产，应当予以返还；不能返还或者没有必要返还的，应当折价补偿。有过错的一方应当赔偿对方因此所受到的损失；各方都有过错的，应当各自承担相应的责任。

二、退款或追缴违法所得的必要性

1. 法律义务：若合同被认定为非法，退款或追缴违法所得是合同无效后的法律后果之一。这是法律对非法行为的一种制裁，也是保护受害方合法权益的必要措施。

2. 恢复原状：退款或追缴违法所得有助于恢复合同签订前的状态，减少受害方的损失。在非法协议合同中，受害方往往因合同无效而遭受经济损失，退款或追缴违法所得可以弥补这部分损失。

3. 社会公正：退款或追缴违法所得也是维护社会公正和公平的需要。非法协议合同往往涉及欺诈、胁迫等不正当手段，退款或追缴违法所得可以打击这些不正当行为，维护市场秩序和公平竞争。

三、具体情形分析

1. 合同无效且已履行：若非法协议合同已经履行，且因合同无效导致一方遭受损失，那么退款或追缴违法所得是必要的。例如，在非法集资案件中，犯罪分子通过非法手段集资后，若合同被认定为无效，犯罪分子必须退赔投资者的资金。

2. 合同无效但未履行：若非法协议合同尚未履行或部分履行，且因合同无效导致合同无法继续履行，那么退款或追缴违法所得也是必要的。在这种情况下，退款或追缴违法所得可以防止损失的进一步扩大。

3. 特殊情况下的处理：对于确实无退款能力的合同方，司法机关应根据其具体情况采取灵活的处理方式。例如，可以考虑分期退款、以其他财产抵债等方案，以确保受害方的损失得到最大程度的弥补。

四、法律建议

1. 及时咨询：若您涉及非法协议合同纠纷，建议及时咨询专业律师，了解合同无效的法律后果及退款或追缴违法所得的可能性。

2. 收集证据：在处理非法协议合同纠纷时，收集相关证据至关重要。这包括合同文本、交易记录、沟通记录等，这些证据将有助于证明合同的非法性及您的损失情况。

3. 依法维权：在了解合同无效的法律后果后，您应依法维权，要求合同方退款或追缴违法所得。若合同方拒绝履行义务，您可以向法院提起诉讼或向相关监管机构投诉。

总结来说，非法协议合同是否需要退款取决于合同的具体性质、履行情况以及法律的规定。在大多数情况下，若合同被认定为非法，退款或追缴违法所得是必要的法律后果。若您涉及此类纠纷，建议及时咨询并依法维权。