结论：投标保证金当天忘写备注，并不直接决定能否要求退回，能否退回主要取决于招标文件的规定、双方合同约定以及实际履行情况。以下从不同角度进行分析：
招标文件的规定：
- 招标文件通常会明确规定投标保证金的提交方式、时间、金额以及退还条件等。如果招标文件中明确要求投标保证金必须备注特定信息（如项目名称、投标单位名称等），而投标人未按照要求备注，那么招标人有权根据招标文件的规定拒绝退还保证金或要求投标人补充相关材料。
- 建议：投标人应仔细阅读招标文件，确保按照要求提交投标保证金，包括备注必要的信息。如果因疏忽未备注，应及时与招标人沟通，说明情况并寻求解决方案。
双方合同约定：
- 如果招标人与投标人之间签订了书面合同，并且合同中明确规定了投标保证金的退还条件，那么双方应按照合同约定执行。合同中可能并未明确要求备注特定信息作为退还条件，此时招标人不能仅因未备注而拒绝退还保证金。
- 建议：在签订合同时，投标人应确保合同条款明确、具体，特别是关于投标保证金的退还条件。如果合同中未明确规定，可以与招标人协商补充或确认相关条款。
实际履行情况：
- 即使招标文件或合同中未明确要求备注特定信息，但如果招标人因未备注而遭受了实际损失（如无法确认保证金来源、无法及时退还等），招标人可能有权要求投标人承担相应的责任。然而，这种情况下的责任承担通常需要根据实际损失情况进行协商或诉讼解决。
- 建议：投标人在提交投标保证金时，应尽量确保备注信息的完整性和准确性，以避免不必要的纠纷。如果因未备注而引发纠纷，应积极与招标人沟通协商，寻求妥善解决方案。
额外提醒：
- 在处理投标保证金退还问题时，投标人应保留好相关证据（如转账记录、招标文件、合同等），以便在需要时证明自己的权益。
- 如果招标人无正当理由拒绝退还投标保证金，投标人可以通过法律途径维护自己的合法权益，如向招标人发出律师函、提起诉讼等。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询，我会根据你的具体情况提供详细的法律建议。