非法经营罪在构成犯罪且造成损失的情况下，通常需要退赔，但具体是否退赔需结合案件具体情况判断。以下从不同角度为你详细分析：

一、法律层面的规定

根据《中华人民共和国刑法》第六十四条的规定，犯罪分子违法所得的一切财物，应当予以追缴或者责令退赔；对被害人的合法财产，应当及时返还；违禁品和供犯罪所用的本人财物，应当予以没收。没收的财物和罚金，一律上缴国库，不得挪用和自行处理。在非法经营罪中，如果犯罪行为造成了被害人的经济损失，那么犯罪分子就有义务退赔这些损失。

二、退赔的实际情况

1. 有明确被害人的情况：

   • 如果非法经营行为直接侵害了特定被害人的权益，如非法经营药品导致患者受损，那么犯罪分子需要向这些被害人退赔相应的损失。
   • 退赔的金额通常根据被害人的实际损失来确定，包括直接经济损失和间接经济损失（如因非法经营行为导致的医疗费用、误工费等）。

2. 无明确被害人的情况：

   • 如果非法经营行为没有直接侵害特定被害人的权益，而是扰乱了市场秩序，如非法经营证券、期货、保险业务等，那么退赔的情况可能相对复杂。
   • 在这种情况下，退赔可能不是直接针对某个被害人，而是作为对犯罪分子违法所得的追缴，上缴国库。但这并不意味着犯罪分子可以逃避退赔的责任，如果其行为造成了社会公共利益的损害，法院在判决时仍可能考虑责令其退赔相关损失（尽管这种损失可能难以直接量化到具体被害人）。

三、退赔与量刑的关系

退赔情况也是法院在量刑时考虑的重要因素之一。根据《最高人民法院、最高人民检察院关于办理非法经营刑事案件具体应用法律若干问题的解释》等相关司法解释，如果犯罪分子在案发后能够积极退赔被害人损失，认罪态度好，有悔罪表现，那么法院在量刑时可能会酌情从轻处罚。反之，如果犯罪分子拒不退赔，态度恶劣，那么法院在量刑时可能会从严处理。

四、实际操作中的建议

1. 对于犯罪嫌疑人/被告人：

   • 如果涉嫌非法经营罪，且确实造成了被害人的经济损失，建议积极退赔，以争取从轻处罚的机会。
   • 退赔时，应保留好相关证据，如退赔协议、收款凭证等，以证明自己的退赔行为。

2. 对于被害人：

   • 如果因非法经营行为遭受了经济损失，应及时向公安机关报案，并积极配合调查取证工作。
   • 在案件审理过程中，可以向法院提出退赔申请，要求犯罪分子退赔自己的损失。

如果你或你身边的人涉嫌非法经营罪，或者因非法经营行为遭受了经济损失，可以直接向我咨询，我会根据你的具体情况提供详细的法律建议。