面对游泳班不退费的问题，您可以按照以下步骤来处理，以维护自己的合法权益：

一、查看合同条款

首先，您需要仔细查看与游泳班签订的合同。合同中通常会明确退费的相关条款，包括在何种情况下可以退费、退费的比例以及退费流程等。确认自己是否符合合同中约定的退费条件，这是后续维权的重要依据。

二、收集相关证据

为了支持您的退费请求，您需要收集并整理好相关证据。这些证据包括但不限于：

• 缴费凭证：如发票、转账记录等，证明您已经支付了费用。
• 沟通记录：与游泳班工作人员或负责人的聊天记录、通话录音等，记录您提出退费请求的过程和对方的回应。

三、尝试与游泳班协商

在收集好证据后，您可以尝试与游泳班进行协商。以理性、平和的态度说明您要求退费的原因，并依据合同条款要求对方退款。如果协商成功，最好形成书面协议，明确退款金额、退款时间等关键内容，以避免后续纠纷。

四、向消费者协会投诉

如果协商无果，您可以向当地的消费者协会投诉。投诉时，请提供缴费依据、合同和其他相关书面材料，详细说明情况。消费者协会会介入调解，帮助您与游泳班达成和解。

五、向行政部门举报

如果游泳班存在违规经营行为，如未取得办学资质、虚假广告宣传或价格欺诈等，您还可以向市场监督管理局（通常可拨打12345政府服务热线）举报。同时，如果游泳班属于教育培训机构，涉及教学质量、师资资质等问题，也可以向教育局或教育委员会反映情况。

六、考虑法律途径

如果上述途径均无法解决问题，您可以考虑向人民法院提起诉讼。在提起诉讼前，请务必收集充分的证据，包括合同、付款凭证、沟通记录等，以支持自己的诉求。虽然诉讼过程可能较为复杂，且需要一定的时间和成本投入，但它是维护您合法权益的有效手段。

七、特别注意事项

• 保留证据：在整个维权过程中，请务必保留好所有相关证据，以备不时之需。
• 了解法律法规：熟悉《中华人民共和国消费者权益保护法》等相关法律法规，将有助于您更好地维护自己的合法权益。
• 保持冷静和理性：面对退费问题，请保持冷静和理性，遵循法律程序进行操作。

希望以上建议能够帮助您解决游泳班不退费的问题。如果还有其他疑问或需要进一步的帮助，请随时告诉我。