结论：根据您描述的情况，是否会坐牢取决于多个因素，包括诈骗行为的性质、金额大小、是否构成犯罪以及各方的具体行为等。以下我会从多个角度为您详细分析。

1. 诈骗行为的性质与金额：

   • 如果骗子通过欺骗手段使您妻子陷入错误认识，并基于此错误认识处分了财产（如将钱款转出），且该行为符合诈骗罪的构成要件，那么骗子可能构成诈骗罪。
   • 诈骗罪的成立通常要求诈骗金额达到一定标准（具体标准因地区而异，一般需达到“数额较大”的程度）。如果诈骗金额未达到刑事立案标准，则可能仅构成治安违法，不会面临坐牢的风险。

2. 您妻子的行为性质：

   • 如果您妻子是在被欺骗的情况下，将钱款转到了您的卡里，并且她本身没有非法占有的目的，也没有参与诈骗行为，那么她通常不会构成诈骗罪的共犯。
   • 但是，如果她明知是诈骗所得而予以转移、窝藏等，则可能构成掩饰、隐瞒犯罪所得罪，这同样可能面临刑事处罚。

3. 您的行为性质：

   • 您提到钱款已经退回去了，这是一个重要的情节。如果您在得知钱款来源后，立即采取了合理措施（如退回钱款）以消除影响，并且没有从中获利或参与诈骗行为，那么您通常不会构成犯罪。
   • 然而，如果您明知钱款是诈骗所得而予以接收、使用或协助转移等，则可能构成诈骗罪的共犯或掩饰、隐瞒犯罪所得罪。

4. 法律后果与量刑：

   • 如果构成诈骗罪，根据诈骗金额的大小和其他情节，骗子可能面临不同年限的有期徒刑、罚金等刑事处罚。
   • 如果您或您妻子构成掩饰、隐瞒犯罪所得罪，同样可能面临刑事处罚，但具体量刑会根据犯罪情节和金额大小等因素综合考量。

建议：

• 鉴于您描述的情况涉及刑事犯罪的可能性，我建议您和您的妻子尽快咨询专业律师，详细陈述事实经过，以便律师能够为您提供准确的法律意见和辩护策略。
• 同时，您也可以积极配合警方调查，提供相关证据和信息，以证明自己的清白或减轻法律责任。

后续行动：

• 如果您有任何进一步的疑问或需要进一步的法律帮助，请随时向我咨询。我会根据您的具体情况，为您提供更加详细和专业的法律建议。