行政处罚决定书不需要受害人签字。以下从多个角度对此问题进行详细分析：

一、行政处罚决定书的性质与目的

行政处罚决定书是行政机关依法对违反行政管理秩序的行为人作出处罚决定的书面文件。其核心目的在于确认违法事实、明确处罚种类与幅度，并告知被处罚人相关权利与义务。这一过程主要涉及行政机关与被处罚人之间的法律关系，而非直接针对受害人。

二、行政处罚决定书的送达对象

根据《中华人民共和国行政处罚法》及相关规定，行政处罚决定书应当送达被处罚人，而非受害人。送达被处罚人是为了确保其知晓处罚内容，并有权在法定期限内申请行政复议或提起行政诉讼。受害人虽然可能因违法行为受到损害，但并非行政处罚决定书的直接接收者。

三、受害人在行政处罚程序中的角色

受害人在行政处罚程序中主要扮演的是报案人或证人的角色。他们可以向行政机关提供违法线索或证据，协助行政机关查明事实。然而，在行政处罚决定作出后，受害人并不直接参与处罚决定的执行或确认过程。如果受害人认为行政处罚决定存在错误或不当，可以通过其他法律途径（如申请行政复议或提起行政诉讼）来维护自己的权益，但这并不涉及在行政处罚决定书上签字的问题。

四、行政处罚决定书的法律效力

行政处罚决定书一旦作出并送达被处罚人，即产生法律效力。被处罚人应当按照决定书的要求履行相关义务，如缴纳罚款、停止违法行为等。如果被处罚人拒不履行，行政机关可以依法采取强制执行措施。这一过程中，受害人的签字并非决定书生效的必要条件。

五、特殊情况下的考虑

虽然一般情况下行政处罚决定书不需要受害人签字，但在某些特殊情况下，如涉及民事赔偿的行政处罚案件中，行政机关可能会组织双方进行调解或协商。在这种情况下，受害人可能会在调解协议或相关文件上签字，以确认赔偿金额、支付方式等事项。然而，这并不改变行政处罚决定书本身的性质与效力，也不意味着受害人需要在行政处罚决定书上签字。

总结与建议：

行政处罚决定书是行政机关对被处罚人作出的具有法律效力的文件，其送达对象是被处罚人而非受害人。因此，行政处罚决定书不需要受害人签字。如果您作为受害人对行政处罚决定有异议或认为自己的权益受到侵害，可以通过申请行政复议或提起行政诉讼等法律途径来维护自己的权益。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。