不签字不会直接影响责任认定书的法律效力，但可能对后续程序产生一定影响，具体需分情况讨论：

1. 责任认定书本身的效力不受影响
   根据《道路交通安全法》第73条，交通事故责任认定书是公安机关交通管理部门根据现场勘查、检验鉴定等证据作出的技术性结论，无需当事人签字确认即生效。即使您拒绝签字，交警仍可依法送达（如留置送达），认定书自送达之日起即产生法律效力，可作为后续赔偿、处罚的依据。

2. 不签字可能影响后续程序推进

   • 行政处罚阶段：若您对责任认定有异议且拒签，交警需在认定书中注明“当事人拒绝签字”，但这不会阻止处罚程序。例如，若认定您全责，交警仍可依法扣分、罚款，甚至吊销驾照。
     
   • 民事赔偿阶段：法院审理赔偿纠纷时，责任认定书是关键证据。即使您未签字，只要对方能证明认定书已合法送达（如通过邮寄回执、公告等），法院仍可能采信其内容。
     
   • 刑事责任阶段：若事故涉及交通肇事罪，检察院可依据认定书提起公诉，您是否签字不影响刑事程序的启动。

3. 拒签的潜在风险

   • 丧失复核申请权：根据《道路交通事故处理程序规定》第71条，您需在收到认定书后3日内申请复核。若因拒签导致未及时收到文书，可能错过复核期限，丧失救济机会。
     
   • 加重举证责任：在诉讼中，若您主张认定书内容错误，需提供充分证据（如监控录像、证人证言等）推翻原结论。拒签行为可能被法院视为“对认定书无异议”，增加您的举证难度。

建议行动：

• 若对责任认定有异议，应在收到认定书后3日内向上一级交警部门申请复核，并提交书面异议材料（如现场照片、行车记录仪视频等）。
  
• 若认为认定书存在程序违法（如未勘查现场、证据不足等），可要求交警出具书面说明，或通过行政诉讼主张撤销。
  
• 即使拒签，也需保留认定书复印件，以便后续维权使用。
  

如有进一步疑问，可直接向我咨询具体应对策略。