诈骗罪的金额认定并非仅以退回为准，而是以行为人实际骗取的金额作为定罪量刑的重要依据，但退回金额在量刑时会被酌情考虑。以下从不同角度为你详细分析：
一、实际骗取金额是定罪量刑的基础
定罪标准：根据《中华人民共和国刑法》及相关司法解释，诈骗公私财物价值达到一定数额即构成诈骗罪。这里的“数额”通常指的是行为人实际骗取到手的财物金额。例如，若行为人通过虚构事实骗得他人5000元，这5000元即为实际骗取金额，达到了诈骗罪的入罪标准。
量刑依据：实际骗取金额也是确定量刑幅度的重要参考。诈骗数额较大的，处三年以下有期徒刑、拘役或者管制，并处或者单处罚金；数额巨大或有其他严重情节的，处三年以上十年以下有期徒刑，并处罚金；数额特别巨大或有其他特别严重情节的，处十年以上有期徒刑或者无期徒刑，并处罚金或者没收财产。
二、退回金额在量刑时的考量
退赃退赔的情节：虽然实际骗取金额是定罪量刑的基础，但行为人在案发后是否退赃退赔，也是法院在量刑时会酌情考虑的因素。如果行为人能够主动退还骗取的财物，或者赔偿被害人的损失，这通常会被视为悔罪表现，法院在量刑时可能会酌情从轻处罚。
退回金额与量刑的关系：退回金额并不直接决定量刑的轻重，而是作为悔罪表现的一个方面，在量刑时起到一定的调节作用。例如，两个行为人实际骗取金额相同，但一个主动退赃退赔，另一个未退赃退赔，法院在量刑时可能会对主动退赃退赔的行为人酌情从轻处罚。
三、其他需考虑的数额与情节
未遂数额：即便行为人未能实际取得财物，但如果其诈骗行为已经着手实施，且以数额巨大的财物为诈骗目标，或具有其他严重情节，仍应定罪处罚。未遂数额在量刑时也会作为参考因素。
可能骗取的金额：在某些情况下，行为人虽未实际获得全部预期金额，但其诈骗手段和计划能明确显示出可能骗取的财物数额。这一数额在量刑时也会作为重要参考因素。
其他情节：诈骗罪的定罪量刑还会综合考虑犯罪动机、手段、造成的后果、是否取得被害人谅解等因素。如诈骗残疾人、老年人等弱势群体，或造成被害人严重后果的，即使数额未达到相应标准，也可能被视为具有“其他严重情节”而加重处罚。
四、综合判断的必要性
对于诈骗罪的判定，不能仅局限于实际获得的金额或退回的金额，而应全面考虑各种相关因素。法院会根据具体情况进行综合分析，以确保判决既符合法律规定，又体现公平正义。
总结来说，诈骗罪的金额认定以实际骗取金额为准，但退回金额在量刑时会被酌情考虑。如果你或你身边的人遭遇了诈骗行为，建议及时向警方报案，并向我咨询相关法律问题，以便更好地维护自己的合法权益。