执法人员确实可以在某些情形下当场收缴20元以下的罚款。这一规定主要基于《行政处罚法》的相关规定，并考虑到实际操作的便利性和效率。

首先，从罚款的数额来看，20元以下的罚款相对较少。这类罚款在行政执法机关的处罚中较为常见，通常针对一些轻微的违法行为，如随地吐痰、乱扔烟头等。对于这类轻微的违法行为，如果要求当事人到指定的银行去缴纳罚款，不仅会增加程序的复杂性，还会给银行带来额外的工作量。因此，为了简化程序和提高效率，法律允许执法人员在某些情况下当场收缴这类罚款。

具体来说，根据《行政处罚法》的相关规定，执法人员在以下两种情形下可以当场收缴罚款：一是依法给予20元以下的罚款；二是不当场收缴事后难以执行的。这两种情形都充分考虑了实际操作的可行性和必要性。

此外，值得注意的是，在边远、水上、交通不便等地区，由于地理上的特殊性，银行网点可能比较稀少或交通不便。在这些地区，如果要求当事人到指定的银行交纳罚款，可能会面临很大的困难。因此，如果当事人提出要求要当场交纳罚款，并且符合相关条件（如罚款金额适中、当事人确有困难等），行政机关及其执法人员也可以当场收缴罚款。这一规定体现了法律对边远、水上、交通不便等地区当事人的特殊照顾和便利。

综上所述，执法人员在符合法定条件和程序的情况下，可以当场收缴20元以下的罚款。这一规定既体现了法律的严谨性，又充分考虑了实际操作的便利性和效率。同时，对于边远、水上、交通不便等地区的当事人，法律也给予了特殊的照顾和便利。