可以拒绝签字，但需注意后续法律程序及证据留存。具体分析如下：

1. 拒绝签字的法律效果
   根据《行政处罚法》第四十四条，行政机关在作出处罚决定前，应当告知当事人拟作出的处罚内容及事实、理由、依据，并告知其陈述、申辩权利。若您对罚款决定不认同，拒绝签字仅表明您不认可处罚内容，但不会直接导致处罚决定失效。行政机关可通过留置送达（如邀请基层组织代表见证）或公告送达等方式完成送达程序，处罚决定仍可能生效。

2. 拒绝签字后的应对措施

   • 要求书面说明理由：根据《行政处罚法》第四十五条，您有权在收到处罚告知书后3日内提出陈述、申辩。若拒绝签字，建议当场以书面形式说明不认同的具体理由（如事实认定错误、程序违法、处罚幅度不当等），并要求行政机关记录在案。
     
   • 申请行政复议或诉讼：若处罚决定最终送达，您可在收到决定书之日起60日内申请行政复议，或6个月内直接提起行政诉讼。根据《行政诉讼法》第三十四条，行政机关对作出的行政行为负有举证责任，若其无法证明处罚合法，法院将撤销或变更处罚。

3. 关键证据留存建议

   • 现场录音录像：若拒绝签字时与行政机关工作人员发生争议，建议通过手机录音录像记录对话内容，重点保留对方未告知权利、未听取申辩等程序违法证据。
     
   • 保存相关文件：留存处罚告知书、决定书、现场检查笔录等全部文件，即使拒绝签字也需要求对方留存副本供您核对。
     
   • 证人证言：若现场有其他人员（如同事、客户）目睹处罚过程，可请其出具书面证言，证明行政机关未依法履行程序。

总结：拒绝签字是您的权利，但需同步通过书面申辩、复议或诉讼等途径主张权益。若对处罚合法性存疑，建议尽快委托律师分析证据链完整性，避免因超过复议/诉讼期限丧失救济机会。如有进一步疑问，可直接向我咨询具体案件细节。