骗了钱退回去了，并不必然意味着不构成犯罪，是否构成犯罪需根据诈骗金额、行为情节以及退还的时机等因素综合判断。以下是对此问题的详细分析：

一、不构成犯罪的情况

1. 诈骗金额未达到刑事立案标准：

   • 若诈骗金额较小，未达到法律规定的“数额较大”标准（一般为三千元至一万元以上，具体标准可能因地区而异），即使实施了诈骗行为，也不构成诈骗罪。此时，退还钱款后可能仅需承担治安管理处罚等行政责任或民事责任。
   • 例子：张三以虚假理由骗取李四500元，后因良心发现迅速退还。由于金额未达到较大标准，且未造成实际危害后果，张三的行为可能不构成犯罪。

2. 犯罪情节显著轻微危害不大：

   • 根据《中华人民共和国刑法》第十三条，若诈骗行为情节显著轻微，且及时退赃退赔，没有对被害人造成实质性损害，也未对社会秩序和公共利益造成严重威胁，则可能不被认定为犯罪。
   • 例子：王五在朋友间开玩笑，虚构事实骗取小额钱财，后立即退还并道歉，未造成任何不良影响。此类行为可能因情节显著轻微而不构成犯罪。

3. 民事欺诈行为：

   • 在经济交往或日常生活中，通过夸大事实、隐瞒真相等手段获取不当利益，但事后及时退还并承担民事责任的行为，可被认定为民事欺诈。
   • 例子：商家夸大产品功效导致消费者购买，后退还货款并给予补偿。此类行为主要通过民事赔偿解决，一般不构成刑事犯罪。

二、构成犯罪的情况

1. 诈骗行为已经完成，退钱属于事后退赃：

   • 若诈骗行为已经既遂，即行为人成功骗取了被害人的财物，此时即使事后将钱退还给被害人，也不影响诈骗罪的成立。退还钱款的行为只能作为量刑情节予以考虑，可能会从轻、减轻处罚，但不能免除刑事责任。
   • 例子：赵六通过网络诈骗骗取5万元，后因被害人报警才退还。此时，赵六的行为已构成诈骗罪，退还行为仅作为量刑时的从轻情节。

2. 量刑影响与特定情形下的免责：

   • 退回诈骗款在量刑时会产生积极影响，如案发前主动退回全部诈骗款或在司法机关介入后积极退赃退赔，可视为悔罪表现，从而可能从轻、减轻或免除处罚。
   • 特定情形：根据相关司法解释，诈骗数额刚达立案标准且全部退赃、取得被害人谅解等，可能判处缓刑或免予刑事处罚。但这并不改变犯罪行为已发生的事实。

三、法律责任与量刑

• 刑事责任：对于诈骗行为，根据骗取财物的数额大小和其他情节严重程度，行为人可能面临不同的法律责任。若诈骗数额较大，可能构成刑法上的诈骗罪，需要承担刑事责任。
• 量刑因素：在量刑时，法院会综合考虑诈骗金额、行为手段、退还钱款的时机和态度等因素，决定具体的刑罚。退还钱款是悔过表现，可以在量刑时作为从轻或减轻处罚的情节予以考虑。

四、民事赔偿的可能性

• 从民事角度看，诈骗行为给受害人造成的损害包括金钱上的直接损失和精神损害等间接损失。即使退还钱款，受害人仍然有权要求诈骗者承担民事赔偿责任，如赔偿因诈骗行为导致的其他经济损失或精神抚慰金等。

总结与建议：

骗了钱后退回去并不意味着可以逃避法律责任。是否构成犯罪需根据具体情况判断，而退还钱款虽可作为量刑时的从轻情节，但并不能完全消除犯罪行为的法律后果。因此，我建议你：

1. 如实供述：如果涉及诈骗行为，应如实向司法机关供述自己的罪行，争取从宽处理。
2. 积极退赃：尽快退还诈骗所得，以体现悔罪态度，争取在量刑时获得从轻或减轻处罚。
3. 咨询专业意见：由于每个案件的具体情况不同，建议你在处理此类问题时咨询专业律师，以便获得更准确的法律意见和帮助。

如果你有任何法律问题或需要进一步的法律咨询，请随时向我提问。