如果司机拒不归还乘客遗失的手机，可能构成侵占罪，需要承担刑事责任。下面我对此进行详细分析：
一. 侵占罪的构成
- 侵占罪的定义：根据《中华人民共和国刑法》第二百七十条，侵占罪是指将代为保管的他人财物非法占为己有，数额较大，拒不退还的行为。
- 构成要件：
- 代为保管的他人财物：在本例中，乘客遗失的手机被司机拾得后，手机即处于司机的保管之下。
- 数额较大：关于“数额较大”的具体标准，通常由地方高级人民法院、人民检察院根据当地经济发展状况等因素确定。如果手机的价值达到或超过这一标准，即构成侵占罪。
- 拒不退还：司机在明知手机是乘客遗失的情况下，拒绝归还给乘客或其家属，即构成拒不退还。
二. 侵占罪的刑事责任
- 刑罚规定：根据《中华人民共和国刑法》第二百七十条，犯侵占罪的，处二年以下有期徒刑、拘役或者罚金；数额巨大或者有其他严重情节的，处二年以上五年以下有期徒刑，并处罚金。
- 实际应用：在具体案件中，法院会根据手机的实际价值、司机的主观恶性、退赔情况等因素，综合考虑后作出判决。
三. 建议与结论
- 建议：如果司机确实拾得了乘客的手机并拒绝归还，乘客可以首先尝试通过协商或调解的方式解决。如果协商无果，乘客可以向公安机关报案，由公安机关立案侦查，并依法追究司机的刑事责任。
- 结论：因此，如果司机拒不归还乘客遗失的手机，且手机价值达到“数额较大”的标准，那么司机的行为就可能构成侵占罪，需要承担刑事责任。
如有进一步需要，您可以继续咨询我。