收集行政处罚证据是一个严谨且细致的过程，必须严格遵循法定程序和要求。以下是从不同方面着手收集行政处罚证据的详细方法：

一、书证收集

书证是以文字、符号、图形等所记载的内容或表达的思想来证明案件事实的证据。在收集书证时，应尽可能获取原件。若取得原件存在困难，可以收集与原件核对无误的复印件、照片等，并注明书证的出处、制作时间以及证明对象等信息，确保书证的真实性和关联性。

二、物证收集

物证是指以其存在、外形、质量、特征等来证明案件事实的物品。在收集物证时，应尽可能收集原物。若收集原物确有困难，可以收集足以反映原物外形和特征的照片、录像等，并对物证的来源、提取过程等做好详细记录，确保物证的完整性和真实性。

三、视听资料、电子数据收集

视听资料、电子数据是指通过录音、录像、电子计算机等技术手段形成的资料。这类证据应保证其真实性、完整性，并记录制作方法、制作时间以及证明对象等。在收集过程中，必须通过合法途径获取，不得侵犯他人的合法权益。

四、证人证言收集

证人证言是知道案件真实情况的人对案情的描绘与陈述。在收集证人证言时，应询问证人并个别进行，如实记录证人的陈述，并由证人核对无误后签名或盖章。同时，要确保证人与案件无利害关系，以保证证言的客观性和公正性。

五、当事人陈述收集

当事人陈述是当事人向执法人员所作的关于案件真实情况的叙述和承认。在收集当事人陈述时，应通过询问当事人，让其如实说明案件情况，并记录在案。记录完成后，应由当事人签字确认，以确保陈述的真实性和准确性。

六、鉴定意见收集

鉴定意见是鉴定人运用自己具有的专门知识对案件中专门性问题所进行的分析、鉴别和判断。在收集鉴定意见时，应委托具备资质的鉴定机构进行鉴定，并要求鉴定机构出具书面鉴定意见，同时加盖鉴定机构印章和鉴定人签名，以确保鉴定意见的权威性和专业性。

七、勘验笔录、现场笔录收集

勘验笔录、现场笔录是执法人员现场进行勘验、检查时所作的记录。在收集这类证据时，执法人员应现场进行勘验、检查，并如实记录情况。记录完成后，应由执法人员、当事人等相关人员签名。若当事人拒绝签名，应注明情况，以确保笔录的真实性和合法性。

综上所述，收集行政处罚证据需要严格遵循法定程序和要求，从多个方面着手，并确保各类证据的真实性、关联性和合法性。只有这样，才能为行政处罚的作出提供有力支撑。