行政机关在实施行政处罚时，是会告知对方的。这一点在我国的法律中有明确的规定，下面我将从法律条文、告知内容以及告知方式三个方面为你详细解释。

一、法律条文依据

根据《中华人民共和国行政处罚法》第三十一条的规定：“行政机关在作出行政处罚决定之前，应当告知当事人作出行政处罚决定的事实、理由及依据，并告知当事人依法享有的权利。”这一条款明确规定了行政机关在作出行政处罚决定前，有义务告知当事人相关的事实、理由和依据，以及当事人所享有的权利。

二、告知内容

行政机关在告知当事人时，需要包括以下几个方面的内容：

1. 作出行政处罚决定的事实：即当事人违反了哪些法律、法规或规章，以及具体的违法事实是什么。
2. 作出行政处罚决定的理由及依据：即行政机关为何要对当事人进行处罚，以及处罚的法律依据是什么。
3. 当事人依法享有的权利：包括陈述权、申辩权、申请行政复议或提起行政诉讼的权利等。

三、告知方式

行政机关在告知当事人时，通常会采取以下方式：

1. 口头告知：在作出行政处罚决定前，行政机关可以口头告知当事人相关的事实、理由和依据，以及当事人所享有的权利。但口头告知通常需要后续以书面形式进行确认。
2. 书面告知：行政机关会制作行政处罚决定书，并在宣告后当场交付当事人。如果当事人不在场，行政机关会在七日内依照民事诉讼法的有关规定，将行政处罚决定书送达当事人。行政处罚决定书会详细载明当事人的姓名或名称、地址，违反法律、法规或规章的事实和证据，行政处罚的种类和依据，以及不服行政处罚决定时的救济途径和期限等信息。

特殊情况说明：

• 在涉及行政拘留等特定处罚时，如果存在受害人，公安机关还需要将决定书副本抄送受害人，以保障受害人的知情权。
• 如果当事人对行政处罚决定不服，有权依法申请行政复议或提起行政诉讼。行政机关不得因当事人申辩而加重处罚，这体现了法律对当事人权利的充分保障。

综上所述，行政机关在实施行政处罚时，是会告知对方的。这是法律规定的义务，也是保障当事人合法权益的重要措施。如果你在行政处罚方面有任何疑问或需要进一步的法律帮助，可以直接向我咨询。