结论：警察一般不会仅因乘客声称手机遗失在你车上而直接拘留你，但若存在其他涉嫌违法犯罪的情形，如盗窃、侵占等，且证据充分，则可能会被拘留。
详细分析：
拘留的法定条件：
- 根据《中华人民共和国刑事诉讼法》的相关规定，拘留是公安机关在紧急情况下，对现行犯或者重大嫌疑分子依法采取的临时剥夺其人身自由的强制措施。拘留必须同时具备两个条件：一是拘留对象是现行犯或者是重大嫌疑分子；二是有法定的紧急情形之一，如正在预备犯罪、实行犯罪或者在犯罪后即时被发觉的，被害人或者在场亲眼看见的人指认他犯罪的等。
乘客手机遗失情况下的处理：
- 如果乘客仅仅声称手机遗失在你车上，而你没有看到，且没有其他证据表明你涉嫌盗窃、侵占等违法犯罪行为，那么警察一般不会直接拘留你。
- 警察可能会进行调查，包括询问你、查看车内监控（如果有的话）、询问其他乘客等，以确定手机是否确实遗失在你车上，以及你是否与手机遗失有关。
可能涉嫌违法犯罪的情形：
- 如果在调查过程中，警察发现你有盗窃、侵占等违法犯罪行为的嫌疑，并且证据充分，那么你可能会被拘留。
- 例如，如果车内监控显示你拿走了乘客的手机，或者有其他乘客指认你拿走了手机，且你无法合理解释手机在你手中的原因，那么你就可能涉嫌盗窃或侵占。
你的权利与义务：
- 在面对警察的调查时，你有权保持沉默，但也有义务配合警察的调查工作。
- 如果你确实没有拿走乘客的手机，你可以向警察说明情况，并提供相关证据（如行车记录仪、车内监控等）来证明自己的清白。
建议：
- 如果你遇到这种情况，首先保持冷静，不要惊慌失措。
- 积极配合警察的调查工作，如实说明情况。
- 如果可能的话，提供相关证据来证明自己的清白。
- 如果你对警察的处理有异议，可以依法提出申诉或寻求法律援助。
后续行动：
- 如果你确实没有拿走乘客的手机，且警察的调查也证明了这一点，那么事情应该就此结束。
- 如果警察仍然怀疑你涉嫌违法犯罪，并且采取了进一步的强制措施（如拘留），那么你应该及时咨询专业律师，了解自己的权利和义务，并寻求法律帮助。
总之，警察不会仅因乘客声称手机遗失在你车上而直接拘留你，但若存在其他涉嫌违法犯罪的情形且证据充分，则可能会被拘留。在面对这种情况时，保持冷静、积极配合调查、提供相关证据是关键。如果有任何疑问或需要进一步的法律帮助，请随时向我咨询。