针对您提出的“物业不管理，什么部门可以处罚”的问题，以下是我的详细解答：

结论：对物业不进行管理的行为，主要由国务院建设行政主管部门、县级以上地方人民政府房地产行政主管部门以及城管部门进行处罚。

分析说明：

1. 物业的监管部门：

   • 物业主要由国务院建设行政主管部门和县级以上地方人民政府房地产行政主管部门进行监管。这些部门负责确保物业公司依法运营，维护业主的合法权益。

2. 对物业的处罚权：

   • 如果物业公司或业主委员会作出的决定违反法律、法规，物业所在地的区、县人民政府房地产行政主管部门或者街道办事处、乡镇人民政府，有权责令其限期改正或者撤销其决定，并通告全体业主。
   • 城管部门也具有一定的执法权，特别是在处理小区内的违法违规行为时，但城管部门并不直接监管物业公司，而是处理物业公司管理范围内发生的具体违法行为。

3. 法律依据：

   • 对物业进行处罚的法律依据主要包括《物业管理条例》和《中华人民共和国行政处罚法》。例如，《物业管理条例》中明确规定，业主大会、业主委员会作出的决定违反法律、法规的，相关部门应责令限期改正或者撤销其决定。
   • 同时，《中华人民共和国行政处罚法》也为行政处罚提供了法律基础。

4. 具体处罚案例：

   • 以南阳发布的典型案例为例，某商业运营管理有限公司因未公示公共收益收支情况，违反了《河南省物业管理条例》的相关规定，被邓州市住建局下达书面限期整改通知书，并要求限期进行整改。若逾期未整改，将移交城市综合执法部门按照相关规定予以处罚。

综上所述，对物业不进行管理的行为，国务院建设行政主管部门、县级以上地方人民政府房地产行政主管部门以及城管部门均有权进行处罚。若您所在的小区物业存在不管理的情况，您可以向上述部门反映问题，并要求其进行处罚。