若委托书法人想要回委托书但要不回来，可分以下几种情况处理：

1. 若委托书仍在有效期内，且受托人无正当理由拒绝归还：

   • 协商解决：首先尝试与受托人进行友好协商，明确表达想要收回委托书的意愿，并了解对方拒绝归还的原因。若双方能达成一致，可签订书面协议，明确委托书的收回及后续事宜。
   • 法律途径：若协商无果，且委托书中涉及重要权益或存在潜在风险，可考虑通过法律途径解决。具体而言，可以向法院提起诉讼，要求受托人返还委托书，并可能要求赔偿因受托人不当行为造成的损失。在此过程中，需准备充分的证据，如委托书原件或复印件、与受托人的沟通记录等，以证明自己的权益。

2. 若委托书已过期或已履行完毕，但受托人仍拒绝归还：

   • 沟通解释：向受托人解释委托书已过期或已履行完毕，其继续持有委托书已无实际意义，并请求其归还。
   • 书面催告：若口头沟通无果，可向受托人发送书面催告函，明确要求其归还委托书，并设定合理的归还期限。
   • 法律手段：若受托人仍拒绝归还，且委托书中涉及敏感信息或可能被用于不当用途，可考虑通过法律手段强制其归还，如申请法院强制执行或采取其他法律措施。

3. 若委托书涉及重要权益，且受托人可能存在滥用或泄露风险：

   • 紧急措施：立即采取紧急措施，如通知相关机构或个人，防止受托人滥用或泄露委托书中的信息。
   • 法律救济：同时，向法院提起诉讼，要求受托人立即停止滥用或泄露行为，并赔偿因此造成的损失。在此过程中，需密切关注受托人的动态，及时收集证据，以支持自己的诉讼请求。

在处理此类问题时，还需注意以下几点：

• 保留证据：无论采取哪种方式，都需保留好与受托人的沟通记录、委托书原件或复印件等证据，以备不时之需。
• 谨慎行事：在处理过程中，需保持冷静和理性，避免采取过激行为或言语，以免激化矛盾或引发不必要的法律纠纷。
• 寻求专业帮助：若对法律程序或证据收集等方面存在疑问或不确定，可寻求专业律师的帮助，以确保自己的权益得到充分保障。

如有任何疑问或需要进一步的法律帮助，请随时向我咨询。