做生意的钱用了退回去给对方一点，是否算诈骗，不能一概而论，需要结合具体情况综合判断。以下从不同角度为你详细分析：

1. 若构成诈骗罪的情况

诈骗罪是指以非法占有为目的，用虚构事实或者隐瞒真相的方法，骗取数额较大的公私财物的行为。如果在使用做生意的钱时，行为人从一开始就具有非法占有的目的，通过虚构事实、隐瞒真相等手段骗取对方资金，即便后来退回去一部分给对方，仍然可能构成诈骗罪。

例如，行为人虚构一个根本不存在的投资项目，声称该项目有高额回报，诱使对方投入资金用于该“项目”。实际上，行为人根本没有将资金用于所谓的项目，而是用于个人挥霍或其他非法用途。在对方发现后，行为人迫于压力退回去一部分钱，但此时其行为已经符合诈骗罪的构成要件，即具有非法占有目的、实施了诈骗行为、骗取了数额较大的财物，退还部分款项只是退赃表现，不影响诈骗罪的成立。不过，在量刑时，积极退赃退赔属于从轻量刑情节，法院在量刑时会予以考虑，可能会对行为人从轻处罚。

2. 若不构成诈骗罪的情况

如果行为人在使用做生意的钱时，并没有非法占有的目的，只是由于经营过程中出现了一些意外情况，导致资金暂时无法全部归还，后来退回去一部分给对方，这种情况一般不构成诈骗罪。

例如，行为人与对方合作做生意，在经营过程中遇到了市场风险、不可抗力等因素，导致资金周转困难，无法按照原计划将全部资金归还给对方。但行为人一直在积极努力解决问题，后来在有能力的情况下退回去一部分钱，以表达自己的诚意和解决问题的态度。这种情况下，由于行为人没有非法占有的目的，其行为不符合诈骗罪的构成要件，因此不构成诈骗罪。

3. 部分退款对诈骗数额认定的影响

如果行为人的行为构成诈骗罪，部分退款会在认定诈骗数额时产生影响。一般来说，如果是在被害人要求或相关部门介入下退还部分款项，在认定诈骗数额时会将已退款项扣除。也就是说，最终认定的诈骗数额是行为人实际骗取且未退还的数额。

例如，行为人诈骗了对方 10 万元，后来在被害人报警后，迫于压力退还了 3 万元。那么在认定诈骗数额时，会以 7 万元作为诈骗数额进行量刑。

综上所述，做生意的钱用了退回去给对方一点是否算诈骗，关键在于行为人是否具有非法占有的目的以及是否实施了诈骗行为。如果你或身边的人遇到类似情况，存在法律方面的疑问，可以直接向我咨询，我会根据具体情况为你提供专业的法律分析和建议。