结论：投资做生意别人把本金退回来了，这一行为本身并不直接等同于诈骗，是否构成诈骗需要结合具体情形来判断。

分析如下：

1. 诈骗的构成要件：

   • 诈骗罪是指以非法占有为目的，使用欺骗方法，骗取数额较大的公私财物的行为。
   • 构成诈骗罪需要满足四个要件：一是行为人具有非法占有的目的；二是使用了欺骗方法；三是骗取了数额较大的公私财物；四是受害人基于错误认识而处分财产。

2. 本金退回与诈骗的关系：

   • 如果行为人在投资过程中，确实存在欺骗行为，但事后将本金退回，这可能表明其并非一开始就具有非法占有的目的，或者是在被发现后为了掩盖罪行而采取的补救措施。然而，这并不意味着其行为不构成诈骗，因为诈骗罪的成立并不完全取决于是否最终占有了财物，而是取决于行为时是否具有非法占有的目的和是否使用了欺骗方法。
   • 如果行为人一开始就没有欺骗的故意，而是由于市场变化、经营不善等原因导致投资失败，随后将本金退回，那么这种行为显然不构成诈骗。

3. 具体情形的判断：

   • 有欺骗行为但退回本金：如果行为人在投资过程中使用了欺骗方法，如虚构项目、夸大收益等，但事后在受害人发现或要求下退回了本金，这仍然可能构成诈骗罪的未遂或中止，具体取决于行为人的主观意图和客观行为。如果行为人是为了继续欺骗而暂时退回本金，或者退回本金后仍有其他欺骗行为，那么更可能构成诈骗罪。
   • 无欺骗行为且退回本金：如果行为人在投资过程中没有使用欺骗方法，而是由于正当原因导致投资失败，并主动退回了本金，那么这种行为不构成诈骗。

4. 法律建议：

   • 如果您或他人遇到了类似情况，建议首先收集相关证据，如投资合同、转账记录、沟通记录等，以证明行为人的行为是否构成诈骗。
   • 如果怀疑行为人构成诈骗，应及时向公安机关报案，并配合调查工作。
   • 在投资过程中，应谨慎选择投资项目和合作伙伴，避免盲目投资和轻信他人承诺。

后续行动建议：

• 如果您对具体情形是否构成诈骗有疑问，或者需要进一步的法律帮助，可以直接向我咨询。我会根据您的具体情况，提供专业的法律意见和帮助。