别人未经允许拿走你的手机去退税，这可能涉及到盗窃或诈骗等违法行为，你应当立即报警并寻求法律援助。下面我将从法律角度为你详细分析这个问题，并提供相应的建议。

一. 分析可能涉及的法律问题

1. 盗窃行为：如果别人未经你的允许，擅自拿走你的手机并尝试退税，这可能构成盗窃行为。根据《中华人民共和国刑法》的相关规定，盗窃公私财物，数额较大的，或者多次盗窃、入户盗窃、携带凶器盗窃、扒窃的，处三年以下有期徒刑、拘役或者管制，并处或者单处罚金。

2. 诈骗行为：如果此人使用你的手机进行退税操作，并意图通过欺骗手段获取不当利益，这可能构成诈骗行为。诈骗公私财物，数额较大的，同样会受到法律的制裁。

3. 侵犯财产权：无论是盗窃还是诈骗，都侵犯了你的财产权。你有权要求侵权人停止侵害、返还财产，并赔偿因此造成的损失。

二. 应采取的措施

1. 立即报警：一旦发现手机被他人拿走并尝试退税，你应立即向当地公安机关报案，说明情况并提供相关证据。

2. 联系退税机构：同时，你也可以联系退税机构，告知他们你的手机被盗用进行退税操作，请求他们协助调查并停止相关退税流程。

3. 寻求法律援助：如果在此过程中遇到法律问题或需要进一步的法律帮助，你可以咨询专业律师（此处为角色设定，实际应表述为“你可以寻求法律援助或咨询律师”），以维护你的合法权益。

三. 预防与提醒

• 加强防范意识：在日常生活中，应加强对个人财物的保管和防范意识，避免类似事件的发生。
• 及时备份数据：定期备份手机中的重要数据，以防手机丢失或被盗后造成不必要的损失。

我建议，你应立即报警并联系退税机构，同时寻求法律援助以维护你的合法权益。如有进一步需要，您可以继续咨询我。