部队退休人员的管理归属问题，主要依据其身份和具体情况而定。一般来说，军队离退休干部的服务管理由相关部门专门负责，这些部门会组织各类活动，如文艺活动、体育比赛等，以丰富他们的退休生活，并传递党和政府的关心关爱。

对于军队无军籍退休职工，他们的服务管理工作则更为明确。根据《军队无军籍退休职工服务管理办法》，这类人员的管理主要由退役军人工作主管部门负责。这些主管部门在本级人民政府的领导下，负责本行政区域内无军籍职工的服务管理工作。具体来说，退役军人工作主管部门指定的退役军人服务中心、乡镇（街道）退役军人服务站等服务管理单位，会承担无军籍职工服务管理的具体工作。

这些服务管理单位会负责无军籍职工的接收安置、生活待遇落实、医疗待遇协助落实、思想政治教育、党员教育管理、走访慰问、文化体育活动组织、档案管理以及年度登记审核等工作。同时，他们还会鼓励无军籍职工结合自身优势，在基层治理、志愿服务等方面积极发挥作用，并加强无军籍职工服务管理队伍建设，提高工作人员政策业务水平和服务管理能力。

总的来说，部队退休人员的管理是一个综合性的工作，需要多个部门和单位的共同努力和协作。无论是军队离退休干部还是无军籍退休职工，他们都会得到党和政府的关心和关爱，以及相应的服务和管理。