环卫工人一般归当地政府或相关市政部门管理，具体归属可能因地区、级别和体制的不同而有所差异。

在很多地方，环卫工人的管理责任主要由城市管理部门或住房城乡建设部门承担。例如，在广东省，根据相关政策文件，各地级以上市、各县（市、区）政府是改善环卫工人待遇的责任主体，而省住房城乡建设厅则负责加强监督指导，完善工作制度和行业标准，并会同省有关部门定期对各地工作情况进行监督检查。这表明，环卫工人的管理涉及多个层级的政府部门，其中住房城乡建设部门在其中扮演着重要角色。

此外，环卫工人的具体管理还可能涉及到环卫所、环卫企业等基层单位。这些单位负责环卫工人的日常调度、工作安排、待遇发放等具体事务。例如，在某些地区，环卫工人可能由当地的环卫所直接管理，而环卫所则隶属于更高级别的城市管理部门或住房城乡建设部门。

总的来说，环卫工人的管理是一个涉及多个层级和部门的复杂体系。如果您对特定地区的环卫工人管理归属有疑问，建议咨询当地的城市管理部门或住房城乡建设部门，以获取最准确的信息。