当中标人放弃中标资格时，投标保证金是否退还，这取决于招标人的选择。根据《招标投标法实施条例》的相关规定，如果中标人无正当理由放弃中标项目，招标人可以选择不退还其投标保证金。这是招标人的权利，而不是义务。也就是说，在这种情况下，不退还投标保证金是招标人可以选择的一种处理方式，但并非必须如此。

此外，如果招标人选择不退还保证金，且给招标人造成的损失超过投标保证金数额的，中标人还应当对超过部分予以赔偿。当然，如果中标人未提交投标保证金或投标保证金不足赔偿的，招标人有权要求中标人赔偿实际损失。

因此，在处理这类问题时，建议招标人根据实际情况和具体损失，综合考虑是否退还投标保证金，并在必要时寻求法律专业人士的协助，以确保自身权益得到最大程度的保护。