遗弃罪原则上归公安机关管辖，但在特定情况下，被害人也可以直接向人民法院提起自诉。以下是对这一问题的详细解析：

一、遗弃罪的公诉性质与公安机关的管辖权

遗弃罪，即对于年老、年幼、患病或其他没有独立生活能力的人，负有扶养义务而拒绝扶养，且情节恶劣的行为，在性质上原则上是公诉案件。这意味着，当遗弃行为达到情节恶劣的程度时，应由公安机关立案侦查，人民检察院审查起诉，并最终由人民法院进行审判。公安机关作为刑事案件的侦查机关，具有对遗弃罪进行初步调查、收集证据、确定犯罪嫌疑人并采取必要强制措施的权力。

二、遗弃罪自诉的特殊情况

尽管遗弃罪原则上是公诉案件，但在某些特定情况下，被害人也可以选择直接向人民法院提起自诉。这主要发生在以下情形：

1. 被害人有足够证据：如果被害人掌握了遗弃行为的相关证据（如证人证言、视频资料等），并认为无需经过公安机关侦查程序，可以直接向人民法院提起自诉。
2. 被害人无法或不愿通过公安机关：在被害人因受到强制、威吓无法自行告诉，或者被害人认为通过公安机关处理可能不够及时或有效时，也可以选择直接向人民法院提起自诉。

三、公安机关管辖遗弃罪的具体流程

1. 报案受理：当发现有遗弃行为发生时，任何单位和个人都可以向公安机关报案。公安机关接到报案后，会进行初步审查，认为有犯罪事实需要追究刑事责任，且属于自己管辖的，会予以立案。
2. 调查取证：立案后，公安机关会展开全面的调查取证工作，包括询问被害人（如果能够表达）、证人，收集现场勘查笔录、物证、书证、视听资料等证据。
3. 采取强制措施：如果有证据证明犯罪嫌疑人涉嫌遗弃罪，公安机关可以对其实施强制措施，如拘传、取保候审、监视居住、拘留、逮捕等，以确保犯罪嫌疑人能够配合案件的调查和处理。
4. 移送起诉：经过侦查，公安机关认为犯罪事实清楚，证据确实、充分，依法应当追究刑事责任的，会制作起诉意见书，连同案卷材料、证据一并移送同级人民检察院审查决定。

四、法律建议

1. 及时报案：如果发现遗弃行为，建议立即向当地公安机关报案，以便及时启动侦查程序，保护被害人的合法权益。
2. 收集证据：在报案过程中，尽可能提供详细的证据和材料，如医疗证明、户籍证明、相关证人证言、现场照片或视频等，以协助公安机关查明事实。
3. 了解法律程序：了解遗弃罪的公诉和自诉程序，以便在必要时选择合适的法律途径维护自己的权益。

如果您有任何关于遗弃罪或其他法律问题的疑问，可以直接向我咨询，我会为您提供专业的法律建议和帮助。