犯罪的认定最终由人民法院来作出。具体过程如下：

1. 侦查阶段：这一阶段由公安机关负责。公安机关会针对案件展开全面侦查，收集与案件相关的证据，包括询问证人、勘查现场、调取监控等。在收集到足够证据后，公安机关会进行初步判断，看是否存在犯罪事实，以及谁可能是犯罪嫌疑人。但这只是初步判断，并非最终认定。

2. 审查起诉阶段：当公安机关完成侦查后，会将案件移送到人民检察院。检察院会对全案证据进行细致审查，从法律角度分析犯罪嫌疑人的行为，综合考虑各种因素，判断其行为是否达到构成犯罪的标准，进而决定是否向人民法院提起公诉。

3. 审判阶段：这是最终认定犯罪的关键阶段。只有人民法院有权依据法律和事实，通过严谨的开庭审理程序，对被告人是否构成犯罪作出最终裁判。其他任何机关、团体和个人都没有这项权力。

综上所述，虽然公安机关在侦查阶段会对犯罪事实进行初步判断，但犯罪的最终认定还是由人民法院通过审判程序来作出的。如果你对此有更多疑问或需要进一步的法律帮助，请直接向我咨询。