若手机已被抵押且他人未经允许动用，您有权要求对方停止侵害并可追究其法律责任，具体需分情况处理：

1. 抵押期间手机仍属您所有，他人无权擅自使用
   根据《民法典》第394条，抵押权设立后，手机所有权仍归您，抵押权人仅享有优先受偿权。若对方未经您同意动用手机（如查看隐私、转移数据、擅自使用等），属于侵犯物权的行为，您可依据《民法典》第235条要求对方返还手机、停止侵害，并可主张赔偿因侵权造成的损失（如数据泄露修复费用、手机折旧损失等）。

2. 若抵押合同明确约定手机使用限制，对方违约需担责
   若抵押合同中明确约定“抵押期间手机由抵押人保管，抵押权人不得擅自使用”，则对方行为构成违约。您可依据《民法典》第577条要求对方承担违约责任，包括继续履行（归还手机）、赔偿损失等。若合同未约定，但对方行为明显超出合理范围（如将手机用于违法活动），您仍可主张侵权责任。

3. 若对方是抵押权人，需区分“占有”与“使用”
   抵押权人通常无权直接“使用”抵押物，除非合同明确约定或法律另有规定（如动产浮动抵押中抵押权人可管理抵押财产）。若抵押权人仅依法“占有”手机（如保管防止您转移），但未经允许使用，仍属侵权。您可要求其停止使用并赔偿损失；若对方拒不配合，可向法院申请“行为保全”，禁止其继续侵害。

行动建议：

• 立即固定证据：拍照、录像记录对方动用手机的行为，保存聊天记录、通话录音等证明对方未经允许的证据；
  
• 书面警告：通过律师函或书面通知要求对方停止侵害，明确法律后果；
  
• 协商或诉讼：若对方拒不改正，可依据合同约定或法律规定，向法院起诉要求返还手机、赔偿损失，或申请诉前财产保全防止手机被进一步损害。
  

若涉及复杂情况（如抵押权人主张“留置权”、手机被非法转卖等），建议进一步说明细节，我会为您详细分析法律风险及应对方案。