行政处罚的听证程序中，听证机关责任人（这里理解为听证主持人等关键角色）并不一定要亲自到场，但听证程序必须依法进行，且当事人或其代理人应当在场，除非存在法定例外情形。以下从不同角度对此问题进行详细分析：

一、法律依据与听证程序要求

根据《中华人民共和国行政处罚法》第六十四条的规定，听证程序有明确的要求，其中与在场相关的主要有：

• 行政机关应当在举行听证的七日前，通知当事人及有关人员听证的时间、地点；
• 当事人可以亲自参加听证，也可以委托一至二人代理；
• 当事人及其代理人无正当理由拒不出席听证或者未经许可中途退出听证的，视为放弃听证权利，行政机关终止听证。

从上述条款可以看出，法律并未明确规定听证机关的责任人（如听证主持人）必须亲自到场，但强调了当事人或其代理人的在场权利。听证程序的核心在于保障当事人的陈述权和申辩权，以及确保听证的公正性和透明度。

二、当事人在场的重要性

1. 保障当事人的陈述权和申辩权：听证是当事人行使陈述权和申辩权的重要方式。当事人在场可以直接向行政机关陈述事实、理由和证据，对拟作出的行政处罚决定进行申辩，有助于行政机关全面了解案件情况，作出公正的决定。

2. 确保听证的公正性和透明度：当事人在场可以监督听证程序的合法性，防止行政机关滥用职权或偏袒一方。同时，公开透明的听证过程也有助于增强公众对行政处罚决定的信任度。

三、特殊情况下的处理

虽然一般情况下当事人应当在场参加听证，但在某些特殊情况下，如当事人因不可抗力或其他正当理由无法亲自到场时，可以依法委托他人代理参加听证。代理人应当提交当事人的授权委托书及身份证明等相关材料，并按照当事人的意愿进行陈述和申辩。

对于听证机关的责任人（如听证主持人）而言，如果因故无法亲自到场，应当依法指定其他合适的人员代为履行职责，以确保听证程序的顺利进行。但这种情况应当尽量避免，因为听证主持人的专业性和经验对于听证程序的公正性和有效性至关重要。

四、法律建议

1. 对于行政机关：在组织听证时，应当确保听证程序的合法性和公正性，依法通知当事人及有关人员听证的时间、地点，并保障当事人的陈述权和申辩权。如果听证机关的责任人因故无法亲自到场，应当依法指定其他合适的人员代为履行职责。

2. 对于当事人：如果收到行政机关的听证通知，应当按时参加听证，或者依法委托他人代理参加听证。如果因故无法参加听证，应当及时向行政机关说明情况，并提交相关证明材料。

如有任何关于行政处罚听证程序的具体问题或疑虑，可以直接向我咨询。我将根据您的具体情况，提供详细的法律解答和建议。