结论：把骗的钱“骗回来”是否违法，需根据具体情况判断，一般情况下可能违法，但在特定条件下可能不构成犯罪或具有一定正当性。以下从不同角度详细分析：

一、一般情况下可能构成违法犯罪

1. 法律性质角度
   诈骗罪的核心构成要件是“以非法占有为目的，通过虚构事实或隐瞒真相骗取财物”。无论被骗对象是否为诈骗分子，只要通过欺骗手段获取其财物，均可能符合诈骗罪的构成要件。例如：

   • 小张被骗子骗走2万元后，设计骗局让骗子误以为有更大利益可图，最终骗取骗子5万元。此时，小张超出原被骗金额的3万元可能被认定为诈骗罪。
     
   • 即使未超出原被骗金额，若手段涉及伪造文件、冒充公职人员等非法行为，仍可能构成其他犯罪（如伪造国家机关公文罪）。

2. 司法实践角度
   司法机关通常要求通过合法程序追缴诈骗财物。个人私自“骗回”钱款可能干扰司法秩序，导致财物权属混乱。例如：

   • 骗子通过多个账户转移资金，若受害者私自骗取钱款，可能使警方难以追踪资金流向，影响案件侦破。
     
   • 即使“骗回”成功，若无法证明资金来源合法性，受害者仍可能面临“不当得利”的民事纠纷。

二、特殊情况下可能不构成违法犯罪或具有正当性

1. 为挽回损失的有限度“欺骗”
   若受害者仅以挽回自身损失为目的，且手段未超出必要限度，可能被视为自助行为。例如：

   • 小李被骗子以“投资返利”骗走1万元后，通过假装继续投资让骗子放松警惕，最终“骗回”1万元且未索要额外财物。此行为可能因缺乏“非法占有目的”而不构成犯罪。
     
   • 关键条件：手段需与损失金额相当，且未对骗子实施暴力、威胁等行为。

2. 针对正在进行的诈骗的“反向欺骗”
   若在诈骗行为实施过程中，为保护财产安全采取欺骗手段反制，且手段与诈骗行为的危害程度相适应，可能被视为类似正当防卫的行为。例如：

   • 遭遇电信诈骗时，受害者通过假装配合转账让骗子暴露账户信息，随后联系警方冻结账户。此行为可能因具有防卫性质而不被追责。
     
   • 关键条件：诈骗行为需处于“正在进行”状态，且反制手段未超出必要限度（如未使用暴力或伪造文件）。

三、合法处理诈骗财物的建议

1. 立即报警并配合调查
   诈骗案件的财物追缴需通过司法程序进行。受害者应第一时间向警方提供证据（如转账记录、聊天记录），由公安机关依法冻结、追缴骗子账户资金。

2. 避免私自处置财物
   即使“骗回”钱款，也可能因证据不足无法证明资金归属，甚至被骗子反诉“诈骗”。例如：

   • 骗子可能通过伪造转账记录声称“受害者实际欠钱”，导致受害者陷入民事纠纷。

3. 咨询专业律师
   若涉及复杂情况（如跨国诈骗、团伙作案），建议委托律师协助处理。律师可帮助分析证据链完整性，制定合法追偿方案，降低法律风险。

总结：面对诈骗时，应优先通过法律途径维权，避免因私自“骗回”钱款而触犯法律。若已采取相关行为，建议立即停止并咨询律师评估风险。如有进一步疑问，可直接向我提问，我将结合具体案情提供专业建议。