招标人应在签订合同后5日内退还保证金，但具体情形还需根据相关法律法规及招标文件规定来确定。以下从不同角度为您详细分析：
一、一般规定
根据《中华人民共和国招标投标法实施条例》第五十七条第二款的规定：“招标人最迟应当在书面合同签订后5日内向中标人和未中标的投标人退还投标保证金及银行同期存款利息。”这一规定明确了招标人在签订合同后退还保证金的基本时间框架。
二、特殊情形
招标文件有特别约定：
- 如果招标文件在退还保证金方面有特别约定，且该约定不违反法律法规的强制性规定，那么应当按照招标文件的约定来执行。例如，招标文件可能规定在签订合同后的更短时间内退还保证金，或者规定在某些特定条件下可以延长退还时间。
投标人存在违约行为：
- 如果投标人在招标过程中存在违约行为，如中标后拒绝签订合同、提供虚假材料等，招标人有权根据相关规定或招标文件的约定，不予退还投标保证金。
三、法律后果
- 如果招标人未按时退还保证金：
- 招标人可能面临行政处罚，如被责令改正、罚款等。
- 投标人也有权向招标人主张退还保证金及银行同期存款利息，甚至可以通过法律途径追究招标人的违约责任。
四、实际操作建议
招标人：
- 应严格按照法律法规和招标文件的规定，及时退还投标保证金，避免不必要的法律纠纷。
- 在退还保证金时，应确保退还金额准确无误，并保留好相关凭证。
投标人：
- 应密切关注招标人退还保证金的情况，如果招标人未按时退还，应及时与招标人沟通并主张自己的权益。
- 在参与招标活动时，应仔细阅读招标文件，了解保证金退还的相关规定，以便在需要时能够维护自己的合法权益。
如果您在建设工程合同纠纷方面还有其他疑问或需要进一步的法律帮助，请随时向我咨询。