要确定对方不归还手机的证据，可从以下几方面着手收集和固定证据：
沟通记录：
- 聊天记录：如果与对方是通过微信、短信、QQ等即时通讯工具沟通的，保存好所有关于手机归还的对话记录。特别是对方明确表示不归还，或者找各种理由拖延的聊天记录，这些都是直接证据。
- 通话录音：如果与对方有过电话沟通，并且通话内容涉及手机归还问题，可以在合法的前提下进行录音。录音中对方如果明确表示不归还手机，或者态度模糊、推诿，都可以作为证据。但需注意，录音的取得不能侵犯他人合法权益或者违反法律禁止性规定。
证人证言：
- 如果有第三方在场，比如共同的朋友、同事或者目击者，他们可以提供证人证言，证明你曾经将手机借给对方，并且对方未归还。证人证言需要证人出庭作证，或者在书面证言上签字确认，以增强其证明力。
物证或现场证据：
- 手机定位：如果手机开启了定位功能，并且你能够获取到手机最后的位置信息，这可以间接证明手机在对方手中。但这种方法需要手机品牌和型号支持，并且对方可能已经关闭了定位功能。
- 现场照片或视频：如果可能的话，拍摄一些现场照片或视频，比如对方使用你的手机，或者手机放在对方处的场景。这些证据可以直观地展示手机在对方手中的情况。
其他辅助证据：
- 购买凭证：保留好手机的购买发票、保修卡等凭证，证明手机的所有权归你所有。
- 报警记录：如果对方拒绝归还手机，你可以向警方报案。警方的出警记录、询问笔录等都可以作为后续维权的证据。
在收集证据的过程中，一定要注意证据的合法性和有效性。比如，录音录像不能侵犯他人隐私，证人证言需要真实可靠，物证或现场证据需要清晰明确等。如果证据不足或者存在瑕疵，可能会影响你的维权效果。
如果对方确实不归还手机，并且你掌握了充分的证据，你可以考虑通过法律途径来维护自己的权益，比如向法院提起民事诉讼，要求对方归还手机或者赔偿损失。在诉讼过程中，你需要将收集到的证据提交给法院，以支持你的诉讼请求。
如果你在处理这类问题时遇到任何困难或者疑问，可以直接向我咨询，我会根据你的具体情况提供专业的法律建议。