行政处罚听证公开时，是允许社会人员参加的，但存在不公开的例外情形。以下是对这一问题的详细解析：
一、公开听证为原则，允许社会人员参加
根据《中华人民共和国行政处罚法》的相关规定，除涉及国家秘密、商业秘密或者个人隐私依法予以保密外，听证应当公开举行。这一原则体现了行政处罚的透明度和公信力，有助于保障公民的知情权、参与权和监督权。在公开听证的情况下，社会人员，包括群众和记者，是可以旁听听证的。公开听证的重要意义在于：
- 增强透明度：通过公开听证，社会公众可以了解行政处罚的具体情况，对执法行为进行监督，从而增强行政处罚的透明度。
- 普法宣传：公开听证也是一次普法教育的机会，让更多人了解相关法律法规和执法程序，提高公众的法律意识。
- 保障权利：公开听证允许社会人员旁听，充分保障了当事人的合法权益和社会公众的参与权，体现了行政程序的公正性和民主性。
二、不公开听证为例外，限制社会人员参加
尽管公开听证是原则，但在特定情况下，为了保护相关利益，听证可以不公开进行。这些特殊情况包括：
- 涉及国家秘密：国家秘密关系国家安全和利益，依照法定程序确定，并在一定时间内只限一定范围的人员知悉。为防止国家秘密泄露，保障国家安全和利益，涉及国家秘密的行政处罚听证必须严格保密，不能公开举行，因此社会人员无法参加。
- 涉及商业秘密：商业秘密是指不为公众所知悉、具有商业价值并经权利人采取相应保密措施的技术信息、经营信息等商业信息。若公开听证可能导致商业秘密泄露，给企业造成重大损失，因此涉及商业秘密的行政处罚听证不公开进行，社会人员同样无法参加。
- 涉及个人隐私：个人隐私是指自然人的私人生活安宁和不愿为他人知晓的私密空间、私密活动、私密信息。若公开听证可能侵犯当事人的个人隐私，给当事人带来不必要的困扰和伤害，因此涉及个人隐私的行政处罚听证也不公开举行，社会人员无法旁听。
三、实际操作中的注意事项
在实际操作中，行政机关应根据具体情况决定是否公开听证，并确保程序的合法性和正当性。对于公开举行的听证，行政机关应履行以下义务：
- 提前通知当事人及有关人员听证的时间、地点；
- 公告当事人的姓名或名称、案由以及举行听证的时间、地点；
- 设置旁听席，允许群众和记者旁听；
- 制作笔录，记录听证的全过程，并由当事人或其代理人核对无误后签字或盖章。
总结来看，行政处罚听证公开时，社会人员是可以参加的，但需注意是否存在不公开的例外情形。如有任何法律疑问或需要进一步的法律帮助，请随时向我咨询。