没退赃的情况下，罚金通常不会直接给受害者，而是上缴国库。以下是对这一问题的详细分析：
一、罚金与退赃的法律性质
罚金：罚金是刑法中规定的一种附加刑，主要针对犯罪分子，要求其向国家缴纳一定数额的金钱。其目的在于惩罚犯罪行为，并起到一定的经济制裁作用。罚金的上缴对象是国家，而非受害者。
退赃：退赃是指犯罪分子在犯罪后，将其非法所得的财物退还给受害者或相关机构的行为。退赃的目的是恢复受害者的经济损失，体现犯罪分子的悔罪态度。
二、没退赃时罚金的处理方式
罚金上缴国库：在犯罪分子未退赃的情况下，罚金仍然按照法律规定上缴国库。这是因为罚金是针对犯罪分子的惩罚措施，与退赃行为是分开的。即使犯罪分子未退赃，也不影响罚金的执行和上缴。
退赃的独立性：退赃是犯罪分子自愿或根据法律要求，将其非法所得退还给受害者的行为。退赃与罚金是两个独立的法律行为，互不影响。犯罪分子未退赃，并不意味着其罚金可以免除或转给受害者。
三、受害者权益的保障
民事赔偿：虽然罚金不会直接给受害者，但受害者可以通过民事诉讼途径，要求犯罪分子赔偿其经济损失。在民事诉讼中，法院会根据受害者的实际损失和犯罪分子的赔偿能力，判决犯罪分子承担相应的民事赔偿责任。
刑事附带民事诉讼：在刑事诉讼过程中，受害者还可以提起刑事附带民事诉讼，要求犯罪分子在承担刑事责任的同时，赔偿其经济损失。这种方式可以简化诉讼程序，提高诉讼效率。
四、特殊情况下的处理
在某些特殊情况下，如犯罪分子确实无力退赃且罚金数额较大时，法院可能会考虑犯罪分子的实际情况和悔罪态度，对罚金数额进行适当调整。但这种调整并不意味着罚金会直接给受害者，而是根据犯罪分子的经济状况和法院的裁量权进行。
建议：
如果有任何具体的法律问题或需要进一步的法律帮助，请直接向我咨询。