非法经营案件中，即使没有受害人且退了赃，仍可能需要交罚金。以下是对此问题的详细分析：
一、非法经营罪的法律规定
根据《中华人民共和国刑法》的相关规定，非法经营罪是指违反国家规定，非法经营，扰乱市场秩序，情节严重的行为。对于构成非法经营罪的，法律明确规定了相应的刑罚，包括有期徒刑、拘役和罚金等。
二、罚金作为刑罚的独立性
罚金是刑法规定的一种附加刑，它独立于主刑（如有期徒刑、拘役）存在。这意味着，即使被告人被判处了主刑，并且已经执行完毕，或者被告人因为某些情节（如自首、立功、退赃等）而获得了从轻或减轻处罚，但罚金作为附加刑仍然可能被判处并执行。
三、退赃对罚金的影响
退赃是指被告人将非法所得的财物退还给被害人或上缴国库的行为。在非法经营案件中，退赃通常被视为被告人认罪、悔罪的一种表现，因此可能会在量刑时得到一定的从轻或减轻处罚。然而，退赃并不等同于免除罚金。罚金是法律对非法经营行为的一种经济制裁，其目的在于惩罚犯罪并预防未来犯罪的发生。因此，即使被告人退了赃，法院仍然可能根据案件的具体情况判处相应的罚金。
四、罚金数额的确定
罚金数额的确定通常由法院根据案件的具体情况来决定，包括但不限于非法经营的数额、情节严重程度、被告人的认罪态度、退赃情况等。法院在判处罚金时，会综合考虑这些因素，以确保罚金的判处既符合法律的规定，又能够体现刑罚的公正性和合理性。
五、实际案例与司法实践
在实际的司法实践中，非法经营案件的被告人即使退了赃，也往往会被判处一定的罚金。这是因为罚金作为刑罚的一种，其目的在于惩罚和预防犯罪，而退赃只是被告人认罪、悔罪的一种表现，并不能完全替代罚金的作用。
建议：
如有任何法律问题或需要进一步的法律帮助，请直接向我咨询。