结论：一般情况下，不建议直接去找邻居公职人员所在单位反映噪音扰民问题，但特定情形下可考虑向其单位反映。以下是具体分析：
通常不建议直接找单位的原因
- 职责范围角度：公职人员所在单位主要管理其工作方面的事务，比如工作任务分配、工作纪律考核等。而噪音扰民属于邻里之间的生活纠纷，并不在其单位的管理职责范围内。单位没有法定职责和权力去处理这种私人生活领域的噪音问题。
- 问题解决效率角度：直接找单位可能无法快速有效地解决噪音问题。单位可能会认为这是员工的私人生活行为，不便过多干涉，最多只是对员工进行提醒，但这种提醒往往缺乏强制力，可能无法让邻居真正停止噪音扰民行为。而且，这还可能引发邻居的反感和抵触情绪，导致矛盾进一步激化。
- 法律程序角度：我国有专门的法律法规和解决途径来处理噪音扰民问题。例如《中华人民共和国环境噪声污染防治法》规定了不同区域的环境噪声标准以及相应的管理措施。当遇到噪音扰民时，更合适的做法是先与邻居协商解决，协商不成可以向物业、社区反映，或者向生态环境主管部门、公安机关等相关部门投诉举报，通过合法的行政程序来维护自己的权益。
特定情形下可考虑向单位反映的情况
- 多次协商及相关部门处理无果：如果已经多次与邻居友好协商，也向物业、社区等相关部门反映过，甚至向生态环境主管部门、公安机关投诉举报过，但邻居仍然持续制造噪音，严重影响了你的正常生活。在这种情况下，为了给邻居施加一定的压力，促使其改正行为，可以考虑向其单位反映情况。不过，在向单位反映时，要注意提供充分的证据，如噪音监测报告、协商记录、相关部门处理情况等，以证明邻居确实存在噪音扰民行为且拒不改正。
- 噪音行为与工作有关：如果邻居制造噪音的行为与其工作有关，例如利用工作设备在非工作时间制造噪音，或者在工作场所将噪音外传影响到你，那么向其单位反映是比较合理的。因为这种情况下，单位对其工作设备和场所负有管理责任，有义务督促员工遵守相关规定，避免对他人造成影响。