结论前置：
详细分析：
首先，我们需要明确刑法第六十四条的相关规定。该条款主要规定了犯罪分子违法所得的一切财物，应当予以追缴或者责令退赔；对被害人的合法财产，应当及时返还；违禁品和供犯罪所用的本人财物，应当予以没收。没收的财物和罚金，一律上缴国库，不得挪用和自行处理。
针对用户的问题，我们可以从以下几个方面进行详细分析：
一、违法所得已全部退赔给受害人的情况
如果犯罪分子已经将其违法所得的全部财物退赔给了受害人，并且没有其他违法所得需要追缴，那么在这种情况下，根据刑法第六十四条的规定，就不需要再追缴违法所得上缴国库。因为此时，受害人的损失已经得到了全额的补偿，且没有剩余的违法所得需要处理。
二、违法所得部分退赔给受害人的情况
如果犯罪分子只是将其违法所得的部分财物退赔给了受害人，而仍有剩余的违法所得未被追缴，那么在这种情况下，根据刑法第六十四条的规定，剩余的违法所得仍然需要被追缴，并上缴国库。这是因为，剩余的违法所得仍然属于犯罪分子的非法所得，应当依法予以追缴和处理。
三、关于追缴违法所得的程序和注意事项
在追缴违法所得的过程中，需要遵循法定的程序和规定。例如，需要依法进行调查取证，确认违法所得的数额和来源；需要依法作出追缴决定，并告知犯罪分子和相关权利人；在追缴过程中，还需要注意保护受害人的合法权益，确保追缴工作不会对其造成不必要的损失。
四、实际案例与法律适用
在实际操作中，法院会根据具体案情和法律规定来作出判断。例如，在某些案件中，犯罪分子可能通过多种方式获取违法所得，其中部分已经退赔给受害人，而部分则被隐藏或转移。在这种情况下，法院会依法追缴剩余的违法所得，并上缴国库。
建议与后续行动：
如果您或您身边的人遇到了类似的问题，建议及时咨询专业律师以获取更具体的法律建议。同时，在处理此类问题时，务必保留好相关证据和文件，以便在需要时提供证明。如果您有任何法律问题或需要进一步的法律帮助，请直接向我咨询。