税务机关有权对逾期缴纳残保金的行为进行处罚。具体分析如下：

1. 法律依据
   根据《残疾人就业保障金征收使用管理办法》（财税〔2015〕72号）第二十六条，用人单位未按规定缴纳残保金的，由税务机关责令限期缴纳；逾期仍不缴纳的，除补缴欠缴数额外，还需自欠缴之日起按日加收5‰的滞纳金。若仍不履行，税务机关可申请法院强制执行。

2. 处罚的合法性
   残保金属于法定征收项目，税务机关作为征收主体，对逾期缴纳行为具有行政处罚权。处罚措施包括：

   • 滞纳金：按日计算，直至缴清为止；
     
   • 强制执行：对拒不缴纳的用人单位，税务机关可依法采取查封、扣押财产等措施。

3. 例外情形
   若用人单位因不可抗力（如自然灾害、政策调整等）导致逾期，可向税务机关申请减免滞纳金或延期缴纳，但需提供相关证明材料。

建议：若您或您的企业面临残保金逾期问题，建议尽快补缴并联系税务机关说明情况，避免滞纳金累积或行政强制措施。如有争议，可进一步向我咨询具体应对方案。