被侵害人对行政处罚决定书不服，不能拒绝签字。签字是接收法律文书的一种形式，表示当事人已经知晓并收到了该决定书。然而，不服行政处罚决定并不因为拒绝签字而改变其法律效力。下面我详细解释一下这个问题：

1. 不影响处罚决定的效力：

   • 根据《中华人民共和国行政处罚法》的相关规定，行政处罚决定书应当在宣告后当场交付当事人。当事人拒绝签收的，并不影响行政处罚决定的效力，该决定仍然自送达之日起生效。

2. 正确的应对方式：

   • 签收并保留证据：即使对行政处罚决定不服，当事人也应当先签收决定书，并妥善保管相关证据材料。这是后续维权的重要基础。
   • 依法申请行政复议或提起行政诉讼：根据《中华人民共和国行政处罚法》第七十三条的规定，当事人对行政处罚决定不服的，有权依法申请行政复议或者提起行政诉讼。这是当事人维护自身合法权益的重要途径。
   • 在复议或诉讼期间不停止执行：需要注意的是，在行政复议或行政诉讼期间，除非法律另有规定，否则行政处罚决定并不停止执行。因此，当事人需要权衡利弊，谨慎选择是否暂时履行处罚决定。

3. 可能的法律后果：

   • 如果当事人既不履行行政处罚决定，也不申请行政复议或提起行政诉讼，那么行政机关有权依法申请法院强制执行。

综上所述，被侵害人对行政处罚决定书不服时，不能通过拒绝签字来改变其法律效力。正确的做法是先签收决定书，并保留好相关证据，然后依法申请行政复议或提起行政诉讼来维护自己的合法权益。如果你在这个过程中有任何疑问或需要进一步的法律帮助，请直接向我咨询。