无证使用人货梯的处罚由特种设备安全监督管理部门负责。以下是对此问题的详细分析：

一. 无证使用人货梯的违法性质

根据《中华人民共和国特种设备安全法》第八十四条第一项，使用未取得许可生产，未经检验或者检验不合格的特种设备，或者国家明令淘汰、已经报废的特种设备的行为，均属于违法行为。人货梯作为特种设备的一种，其无证使用同样构成违法。

二. 处罚部门及法律依据

对于无证使用人货梯的违法行为，特种设备安全监督管理部门有权进行处罚。这一权力来源于《中华人民共和国特种设备安全法》等相关法律法规，该法明确了特种设备安全监督管理部门对特种设备使用单位违法行为的查处职责。

三. 处罚措施

根据相关法律法规，特种设备安全监督管理部门对无证使用人货梯的处罚措施包括但不限于：

1. 责令停止使用：一旦发现无证使用人货梯的行为，特种设备安全监督管理部门会立即责令停止使用，防止安全事故的发生。

2. 罚款：根据违法行为的严重程度和后果，特种设备安全监督管理部门会对无证使用人货梯的单位处以三万元以上三十万元以下的罚款。具体罚款金额会根据实际情况进行裁量。

3. 其他处罚：对于情节严重的违法行为，还可能涉及责令停产停业整顿、吊销许可证等更严厉的处罚措施。

四. 我的观点与建议

无证使用人货梯不仅违反了法律法规，而且极易引发安全事故，对人民群众的生命财产安全构成严重威胁。因此，我强烈建议特种设备使用单位严格遵守相关法律法规，确保特种设备的合法、安全使用。同时，我也提醒广大市民在乘坐电梯时关注梯内粘贴的维保公示卡，监督维保单位的维保工作，共同维护公共安全。

如有进一步需要，您可以继续咨询我。