结论：您以找借口的方式要回50万是否合法，取决于对方借款行为的性质以及您要回款项的具体方式。以下从不同角度为您详细分析：

1. 若对方借款行为构成诈骗：

   • 法律背景：诈骗是指以非法占有为目的，用虚构事实或者隐瞒真相的方法，骗取款额较大的公私财物的行为。如果对方确实是以借款的名义进行诈骗，那么其行为已经触犯了刑法，您有权向公安机关报案，并要求对方返还全部被骗款项。
   • 您的行为合法性：在这种情况下，您以找借口的方式要回50万，虽然方式可能不够直接或正式，但本质上是在追回自己被骗的财物，并不构成违法。然而，为了更有效地维护自己的权益，建议您及时向公安机关报案，并提供相关证据，以便通过法律途径追回剩余款项。

2. 若对方借款行为不构成诈骗，但存在违约或不当行为：

   • 法律背景：如果对方借款时并未以非法占有为目的，但在借款后存在违约（如未按约定时间还款）或不当行为（如将借款用于非法活动），您有权要求对方承担违约责任或返还借款。
   • 您的行为合法性：在这种情况下，您以找借口的方式要回部分款项，可能存在一定的法律风险。因为这种方式可能被视为非正当手段，如果对方对此提出异议，您可能需要证明自己要回款项的合法性。更稳妥的做法是通过协商、调解或诉讼等合法途径来要求对方返还借款。

3. 若对方借款行为完全合法，且您无合法理由要回款项：

   • 法律背景：如果对方借款行为完全合法，且您没有合法的理由（如对方违约、不当行为或诈骗等）要回款项，那么您以找借口的方式要回款项可能构成不当得利或甚至欺诈。
   • 您的行为合法性及后果：在这种情况下，您的行为是不合法的。如果对方发现并对此提出异议，您可能需要返还已要回的款项，并可能面临法律责任。因此，我强烈建议您不要采取这种方式来要回款项。

建议：

• 首先，明确对方借款行为的性质，判断是否存在诈骗、违约或不当行为。
• 其次，根据对方借款行为的性质，选择合适的法律途径来维护自己的权益。如果对方构成诈骗，及时向公安机关报案；如果存在违约或不当行为，可以通过协商、调解或诉讼等方式来要求对方返还借款。
• 最后，无论采取哪种方式，都建议保留好相关证据，以便在需要时证明自己的权益。

如果您在处理此类问题时遇到任何困难或疑问，可以直接向我咨询，我会根据您的具体情况提供更详细的法律建议。