工厂噪音扰民的问题，主要归环保（生态环境）部门和城管（城市管理）部门管理，同时，在特定情况下，公安机关也会介入处理。以下是详细的分析和说明：

1. 环保（生态环境）部门管理职责：

   • 根据《中华人民共和国噪声污染防治法》及相关规定，工厂在生产过程中产生的噪声如果超过国家规定的环境噪声排放标准，并干扰他人正常生活、工作和学习，就构成了噪声污染。
   • 环保（生态环境）部门负责监测和评估工厂的噪声排放情况，对违法排放噪声的行为进行查处，包括责令改正、罚款等处罚措施，并要求工厂采取有效措施控制噪声排放。

2. 城管（城市管理）部门管理职责：

   • 城管（城市管理）部门对工厂的日常运营行为有监督管理职责，这包括对工厂噪声扰民问题的监管。
   • 如果工厂存在未经许可擅自进行高噪声作业等违规行为，城管（城市管理）部门可以依据相关规定责令其改正，并处以相应罚款。

3. 公安机关处理职责：

   • 在工厂噪声严重扰民，影响周边居民正常休息和生活，且工厂拒不改正的情况下，居民可以拨打110报警。
   • 公安机关接到报警后会及时出警，对现场情况进行了解和处理。对于严重干扰居民生活且拒不改正的行为，公安机关可依法对相关责任人予以治安处罚。

应对措施与建议：

• 收集证据：在遭遇工厂噪音扰民时，居民应首先收集相关证据，如噪声录音、视频等，以便在投诉举报时提供有力支持。
• 协商解决：居民可以尝试与工厂方进行协商，寻求双方都能接受的解决方案，如调整作业时间、采取降噪措施等。
• 投诉举报：如果协商不成，居民可以向当地环保（生态环境）部门、城管（城市管理）部门投诉举报工厂的噪声扰民问题。在投诉时，应提供详细的证据材料，以便部门进行调查处理。
• 法律途径：如果工厂的噪声扰民行为严重侵犯了居民的合法权益，且相关部门未能及时有效处理，居民还可以考虑通过法律途径维护自己的权益，如提起民事诉讼等。

综上所述，工厂噪音扰民的问题涉及多个部门的管理和处理职责。居民在遭遇此类情况时，应首先尝试与工厂方协商解决；协商不成时，可向环保（生态环境）部门、城管（城市管理）部门投诉举报；在特定情况下，还可以向公安机关报警。同时，居民也应了解自己的合法权益和相关法律法规，以便更好地维护自己的权益。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。