小工的手机不一定非要等到案件结束才能拿回来。具体情况分析如下：
手机作为证据的情况：
- 如果小工的手机被扣押是因为其中存有与案件相关的证据，如通话记录、短信、照片或视频等，那么手机可能会作为证据被保留至案件审理结束。在此期间，为了不影响案件的侦查、起诉和审判，手机通常不会归还。
手机非证据或证据已提取的情况：
- 如果经过调查，发现小工的手机与案件无直接关联，或者手机中的证据已经被提取并固定，那么手机在案件审理过程中是有可能被提前归还的。这取决于执法机关的具体决定和案件的进展情况。
申请取回手机的途径：
- 小工或其家属可以通过律师向扣押机关提出申请，要求取回手机。申请时需要提供充分的理由和证据，证明手机与案件无直接关联，或者手机中的证据已经被提取并固定。
- 律师可以协助小工准备相关材料，与扣押机关进行沟通，争取尽快取回手机。
综上所述，小工的手机是否要等到案件结束才能拿回来，取决于手机与案件的关联程度以及执法机关的具体决定。如果手机与案件无直接关联，或者证据已经被提取并固定，那么是有可能提前取回手机的。如有进一步疑问或需要法律帮助，请直接向我咨询。