交通事故责任认定书并不需要双方都签字才具有法律效力。以下是对这一问题的详细解释：

1. 法律效力来源：

   • 交通事故责任认定书是由公安机关交通管理部门根据交通事故现场勘验、检查、调查情况和有关的检验、鉴定结论，及时制作的法律文书。它作为处理交通事故的证据，具有法律效力，其效力并不依赖于双方当事人的签字。

2. 签字的意义：

   • 签字通常表示对认定书内容的认可或确认。然而，在交通事故责任认定中，即使一方或双方未签字，只要认定书内容真实、合法、有效，它仍然可以作为处理交通事故的依据。
   • 如果一方对认定书有异议，可以在规定时间内提出复核申请，但这并不影响认定书本身的法律效力。

3. 实际操作中的注意事项：

   • 在收到交通事故责任认定书后，无论是否签字，都应认真阅读并理解其内容。
   • 如果对认定书有异议，应及时向公安机关交通管理部门提出复核申请，并提供相关证据支持自己的观点。
   • 签字前应确保对认定书内容无异议，或者即使有异议也已通过合法途径提出。

4. 法律后果：

   • 拒绝签字并不会改变认定书的法律效力。如果一方拒绝签字，公安机关交通管理部门可以依法将认定书送达给该方，该方仍需承担相应的法律责任。
   • 如果因拒绝签字而导致无法及时处理交通事故或产生其他不良后果，拒绝签字的一方可能需要承担相应的法律责任。

建议：在处理交通事故时，应积极配合公安机关交通管理部门的工作，认真阅读并理解交通事故责任认定书的内容。如果有任何异议或疑问，应及时提出并寻求法律帮助。如果你在处理交通事故责任认定过程中遇到任何问题，可以直接向我咨询，我会根据你的具体情况提供专业的法律建议。