行政机关对于应当给予行政处罚而没有处罚的情况，确实可能承担相应的责任。这主要涉及到行政机关的法定职责以及不履行或不当履行职责的法律后果。以下从几个角度进行详细分析：

1. 法定职责角度：

   • 行政机关在法律、法规的授权范围内，对违反行政管理秩序的行为有依法给予行政处罚的职责。这是行政机关的法定权力，同时也是其必须履行的法定义务。
   • 如果行政机关对于应当给予行政处罚的行为没有进行处罚，那么它就没有履行其法定的职责，这可能构成行政不作为。

2. 法律后果角度：

   • 根据相关法律法规，行政机关不履行或者不当履行法定职责的，可能会受到上级行政机关或者监察机关的责令改正、通报批评等处理。
   • 在某些情况下，如果行政机关的不作为导致了严重的后果，如损害了公民、法人或者其他组织的合法权益，那么相关责任人员还可能面临行政处分，甚至可能构成玩忽职守罪等刑事犯罪。

3. 救济途径角度：

   • 如果公民、法人或者其他组织认为行政机关应当给予行政处罚而没有处罚，侵犯了其合法权益，他们可以通过行政复议或者行政诉讼等途径来寻求救济。
   • 在行政复议或行政诉讼中，行政机关需要证明其已经履行了法定的职责，如果无法证明，那么复议机关或法院可能会撤销行政机关的不作为行为，并责令其重新作出行政行为。

4. 具体案例角度：

   • 在实践中，确实存在行政机关应当给予行政处罚而没有处罚的情况。例如，某些环保部门对于企业的违法排污行为没有及时进行处罚，导致环境污染加剧。在这种情况下，环保部门就可能因为未履行法定职责而承担相应的责任。

建议：

• 对于行政机关而言，应当严格依法履行职责，对于应当给予行政处罚的行为及时进行处罚，以维护行政管理秩序和公共利益。
• 对于公民、法人或者其他组织而言，如果发现行政机关存在应当给予行政处罚而没有处罚的情况，可以通过合法途径进行举报或投诉，以维护自己的合法权益。

如有任何关于行政处罚或行政机关责任的法律问题，都可以直接向我咨询，我会为你提供专业的法律解答。