饭店会员卡不给退钱是否合法，不能一概而论，需要分情况讨论：
如果会员卡属于预付费卡，且饭店在售卡时明确告知了退卡政策：
- 通常情况下，如果饭店在售卡时已经明确告知了消费者会员卡的使用规则，包括退卡政策（如不退卡、退卡需扣除一定费用等），并且这些规则不违反法律法规的强制性规定，那么饭店按照约定执行退卡政策是合法的。
- 法律依据：根据《中华人民共和国消费者权益保护法》的相关规定，经营者与消费者有约定的，应当按照约定履行义务。但约定不得违反法律、法规的规定。
如果会员卡属于预付费卡，但饭店未明确告知退卡政策或政策不合理：
- 如果饭店在售卡时未明确告知消费者退卡政策，或者退卡政策明显不合理（如设置过高的退卡门槛、扣除不合理的费用等），那么消费者有权要求饭店退还剩余款项。
- 法律依据：根据《中华人民共和国消费者权益保护法》第八条和第二十六条，消费者享有知悉其购买、使用的商品或者接受的服务的真实情况的权利；经营者不得以格式条款、通知、声明、店堂告示等方式，作出排除或者限制消费者权利、减轻或者免除经营者责任、加重消费者责任等对消费者不公平、不合理的规定。
如果会员卡并非预付费卡，而是基于消费积分或其他优惠条件发放的：
- 这种情况下，会员卡通常不涉及退钱问题，因为消费者并未提前支付费用。但如果饭店在发放会员卡时承诺了某些优惠或服务，却未能履行，消费者有权要求饭店承担相应的违约责任。
- 法律依据：根据《中华人民共和国民法典》合同编的相关规定，当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。
针对您的情况，我给出以下建议：
- 查看会员卡协议或相关宣传资料：首先，您需要仔细查看会员卡的使用协议或饭店的相关宣传资料，了解退卡政策的具体内容。
- 与饭店协商：如果退卡政策不合理或未明确告知，您可以尝试与饭店协商，要求退还剩余款项或寻求其他解决方案。
- 寻求法律援助：如果协商无果，您可以向当地的消费者协会或市场监管部门投诉，或者咨询专业律师（比如我，李龙律师，专注于婚姻家庭、经济纠纷、合同纠纷等多个领域），了解您的法律权益和可行的维权途径。
希望以上分析能对您有所帮助。如果您有任何其他法律问题或需要进一步的法律咨询，请随时向我提问。