关于“开设赌场罪但是公安说不用退赃”的问题，首先需要明确的是，开设赌场罪属于刑事案件，退赃是刑事诉讼中的一个重要环节。通常情况下，公安机关会要求犯罪嫌疑人退赃，以体现其悔罪态度，并作为量刑时的一个考虑因素。然而，也存在一些特殊情况，使得某些赃款可以不用退还。
通常情况下需要退赃：
- 退赃体现了犯罪嫌疑人的悔罪态度，对其量刑有积极影响，可能会从轻或减轻处罚。
- 不退赃可能会被视为没有悔罪表现，量刑时可能不会给予从轻处理，甚至可能加重处罚。
- 司法机关有权采取强制执行措施来追缴赃款。
特殊情况下可以不用退赃：
- 用于合法生产经营：若赃款投入到合法的生产经营活动中，且该活动对社会有益，那么在合理范围内，这部分赃款可以不用退还。
- 已被司法收缴：当赃款已经被司法机关依法收缴并上缴国库时，就不用再向个人进行退赃。
- 用于履行法定义务：如果将赃款用于支付抚养费、赡养费等履行法定义务的正当用途，并能提供相关证明，经过核实后，这部分赃款可以不用退还。
- 因不可抗力灭失：若由于不可抗力等不可预见、不可避免的因素导致赃款无法追回或已经不存在，比如遭遇自然灾害，这部分赃款也可以不用退还。
因此，虽然公安机关在大多数情况下会要求退赃，但也存在上述特殊情况使得某些赃款可以不用退还。具体是否需要退赃以及退赃的方式和数额等，需根据案件的具体情况和法律规定来确定。如果你面临这样的情况，建议详细咨询专业律师，以便更准确地了解自己的法律义务和权益。