退标后，保证金通常应退还给原缴纳保证金的投标人。不过，具体退还情况还需根据退标的原因、招标文件的规定以及相关法律法规来综合判断。以下从不同角度为您详细分析：

一、正常退标情况下的保证金退还

在招投标活动中，如果投标人因自身原因（如计划变更、资金问题等）决定退标，且该退标行为未违反招标文件的规定和法律法规的强制性要求，那么投标人缴纳的保证金应当予以退还。此时，保证金应退还给原缴纳保证金的投标人，即退标人本人。

二、因违反招标文件规定而退标的情况

如果投标人因违反招标文件的规定（如未按时提交投标文件、投标文件不符合要求等）而被招标人要求退标，那么保证金是否退还以及退还的金额可能会受到招标文件具体条款的约束。一般来说，如果招标文件明确规定了因投标人违约而导致的保证金不予退还的情况，那么招标人有权根据该规定不予退还保证金。但在此情况下，若招标文件或相关法律法规未明确规定不予退还，或者退标并非完全由投标人单方面违约导致，那么保证金仍应退还给投标人，不过可能会扣除一部分作为违约金或赔偿金。

三、法律法规对保证金退还的规定

根据《中华人民共和国招标投标法实施条例》第五十七条的规定，招标人最迟应当在书面合同签订后5日内向中标人和未中标的投标人退还投标保证金及银行同期存款利息。虽然该条款主要针对的是中标后的保证金退还，但从中可以推断出，在招投标活动中，保证金退还的一般原则是应当退还给原缴纳保证金的投标人。当然，这一原则也适用于退标情况，除非招标文件或相关法律法规另有规定。

四、实际操作中的注意事项

1. 仔细阅读招标文件：投标人在参与招投标活动前，应仔细阅读招标文件，了解保证金退还的具体规定和条件。
2. 保留相关证据：在退标过程中，投标人应保留好与退标相关的所有证据，如退标申请书、招标人同意退标的书面回复等，以便在需要时证明自己的权益。
3. 及时沟通协商：如果投标人对保证金的退还存在疑问或争议，应及时与招标人进行沟通协商，寻求解决方案。

总结来说，退标后保证金通常应退还给原缴纳保证金的投标人。但具体退还情况还需根据退标的原因、招标文件的规定以及相关法律法规来综合判断。如果您在招投标活动中遇到了保证金退还的问题，或者有任何其他法律疑问，都可以直接向我咨询，我会根据您的具体情况提供专业的法律建议。