骗了钱后退回去，并不必然免除刑事责任，是否构成犯罪需根据具体情形来判断。以下是对此问题的全面分析：
一、不构成犯罪的情况
诈骗金额未达到刑事立案标准：
- 若诈骗金额较小，未达到法律规定的“数额较大”标准（一般为三千元至一万元以上），即使实施了诈骗行为，也不构成诈骗罪。此时，退还钱款后可能仅需承担治安管理处罚等行政责任或民事责任。例如，骗取了500元后迅速退还，因金额未达到较大标准，且未造成实际危害后果，可能不构成犯罪。
犯罪情节显著轻微危害不大：
- 根据《中华人民共和国刑法》第十三条，若诈骗行为情节显著轻微，且及时退赃退赔，没有对被害人造成实质性损害，也未对社会秩序和公共利益造成严重威胁，则可能不被认定为犯罪。比如，因一时贪念骗取了少量财物，但事后深感后悔并立即退还，且未造成任何不良后果，这种情况下可能不构成犯罪。
二、构成犯罪的情况
诈骗行为已经完成，退钱属于事后退赃：
- 若诈骗行为已经既遂，即行为人成功骗取了被害人的财物，此时即使事后将钱退还给被害人，也不影响诈骗罪的成立。退还钱款的行为只能作为量刑情节予以考虑，可能会从轻、减轻处罚，但不能免除刑事责任。例如，通过网络诈骗骗取了5万元，后因被害人报警才退还，此时已构成诈骗罪，退还行为仅作为量刑时的从轻情节。
诈骗数额巨大或存在其他严重情节：
- 若诈骗数额巨大或存在其他严重情节，如多次诈骗、诈骗手段恶劣等，即使退还钱款，也可能构成犯罪，并面临较重的刑事处罚。不过，在量刑时，法院会综合考虑退还钱款的时机、态度等因素，可能给予从轻或减轻处罚。
三、归还钱款对诈骗罪认定的影响及法律责任
- 量刑影响：归还钱款是悔过表现，可以在量刑时作为从轻或减轻处罚的情节予以考虑。但需要注意的是，这并不能改变诈骗行为的性质，也不能完全免除刑事责任。
- 民事赔偿：从民事角度看，诈骗行为给受害人造成的损害包括金钱上的直接损失和精神损害等间接损失。即使退还钱款，受害人仍然有权要求诈骗者承担民事赔偿责任，如赔偿因诈骗行为导致的其他经济损失或精神抚慰金等。
四、具体建议
- 及时退还：如果意识到自己的行为可能构成诈骗，应尽快退还钱款，以减少对被害人的损害，并体现悔罪态度。
- 主动投案：在退还钱款的同时，可以主动向公安机关投案自首，争取从轻或减轻处罚。
- 咨询律师：由于诈骗罪的认定和量刑涉及复杂的法律问题，建议咨询专业律师以获取更准确的法律意见和帮助。
总结来说，骗了钱后退回去并不意味着可以逃避法律责任。是否构成犯罪需根据具体情况判断，而退还钱款虽可作为量刑时的从轻情节，但并不能完全消除犯罪行为的法律后果。因此，建议遵守法律法规，不要实施诈骗行为，以免给自己和他人带来不必要的麻烦和损失。如果有任何法律问题或疑虑，可以直接向我咨询。