关于“非法经营罪公安说不用退赃是真的吗”这个问题，我可以明确地告诉你：公安说不用退赃并不准确，是否退赃需依据具体案件事实和法律规定来决定。

1. 法律原则与公平角度：

   • 即使不构成非法经营罪或被不起诉，如果存在违法所得，从法律原则和公平角度出发，仍可能需要退赃。因为法律倡导公平，不允许任何人通过违法或不当手段获利。

2. 具体案件情况：

   • 司法机关在处理案件时，会全面考量整个案件情况，包括仔细审查是否存在违法所得，以及违法所得的具体数额、来源等，进而判断是否责令当事人退赃。

3. 退赃的法律意义：

   • 退赃是犯罪嫌疑人或被告人认罪悔罪的一种表现，有助于修复被犯罪行为所破坏的社会经济秩序。
   • 在量刑时，法院往往会考虑犯罪嫌疑人或被告人的退赃情况，积极退赃可能会获得从轻处罚。

4. 实际操作建议：

   • 如果你或你的家属面临非法经营罪的指控，建议积极与司法机关沟通，了解案件具体情况，并根据法律规定和实际情况决定是否退赃。
   • 如果存在违法所得，且司法机关要求退赃，那么最好按法律要求来履行，以避免可能的法律后果。

综上所述，非法经营罪是否退赃并不是由公安单方面决定的，而是需要根据具体案件事实和法律规定来综合判断。如果你对此有任何疑问或需要进一步的法律帮助，请直接向我咨询。