行政处罚法并不要求所有行政处罚必须当场执行，是否当场执行需根据具体情况和法律规定来判断。以下是对此问题的详细分析：

一、当场执行行政处罚的前提条件与限制

1. 违法事实清楚、证据确凿：这是当场执行行政处罚的基础。行政机关在作出处罚决定前，必须有确凿的证据证明违法行为真实存在，不能仅凭猜测或捏造。

2. 处罚种类与法律依据明确：当场执行的行政处罚必须是法律、法规明确规定可以当场执行的种类，如警告或小额罚款等。不是所有处罚都能当场执行，必须依据法律规定进行。

3. 执法人员身份合法：在执行行政处罚前，执法人员必须向当事人出示执法身份证件，以表明其合法的执法身份。

4. 填写并交付行政处罚决定书：执法人员应填写预定格式、编有号码的行政处罚决定书，并当场交付给当事人。决定书中应清晰载明处罚的内容、依据、时间、地点等关键信息。

5. 处罚在法定范围内：当场作出的处罚决定必须在法定的处罚种类和罚款幅度内进行，不得随意超出法律规定的范围。

二、可以当场收缴罚款的特殊情况

在满足上述基本条件的基础上，以下情况下执法人员可以当场收缴罚款：

1. 简易程序下的小额罚款：

   • 对于公民处以五十元以下（部分地方或特定法规可能规定为二十元以下或二百元以下）罚款，或对法人、其他组织处以一千元以下（或三千元以下，视具体法规而定）罚款的行政处罚案件，如果事实清楚、影响轻微，为了提高行政效率，执法人员可以当场作出处罚决定并收缴罚款。

2. 事后难以执行的情况：

   • 对于一些流动性较大、身份不易确认的当事人，如交通执法中的外地号牌骑手未佩戴头盔等，如果不当场收缴罚款，事后可能难以找到该当事人执行处罚。在这种情况下，执法人员也可以当场收缴罚款。

3. 边远、水上、交通不便地区的特殊情况：

   • 在这些地区，如果当事人到指定的银行或通过电子支付系统缴纳罚款确有困难，并经当事人提出，行政机关及其执法人员可以当场收缴罚款。

三、不能当场收缴罚款的情形及一般原则

除上述法定可以当场收缴罚款的情形外，通常应遵循“罚缴分离”的原则，即作出罚款决定的行政机关应当与收缴罚款的机构分离。当事人应当自收到行政处罚决定书之日起十五日内，到指定的银行或者通过电子支付系统缴纳罚款。特别是以下几种情形不得当场执行：

1. 非财产罚的行政处罚：如责令停产停业、吊销许可证等，这些处罚必须通过一般程序实施，不能当场执行。

2. 当事人要求听证或提出实质性申辩：如当事人要求听证或提出实质性申辩（如出示免责证据）时，应中止执行，并按照一般程序处理。

3. 非现场执法方式作出的处罚决定：如通过电子眼抓拍等非现场执法方式作出的处罚决定，需通过书面通知后由当事人自主缴纳罚款。

四、当场收缴罚款的其他要求

1. 出具专用票据：无论在哪种情况下当场收缴罚款，执法人员都必须向当事人出具国务院财政部门或者省、自治区、直辖市人民政府财政部门统一制发的专用票据。否则，当事人有权拒绝缴纳罚款。

2. 及时上缴罚款：执法人员当场收缴的罚款，应当自收缴罚款之日起二日内交至行政机关；在水上当场收缴的罚款，应当自抵岸之日起二日内交至行政机关。行政机关则应在二日内将罚款缴付指定的银行。

总结：行政处罚法并不要求所有行政处罚必须当场执行，而是需根据具体情况和法律规定来判断。在执法过程中，必须严格遵循法律程序和规定，确保执法的公正性和合法性。同时，也应充分保障当事人的合法权益，确保其能够依法行使申诉和救济权利。如果您有具体的法律问题或需要进一步的法律帮助，请直接向我咨询。