在交通事故中，伤残鉴定书的委托单位可以根据不同情况来确定。一般来说，有以下几种委托方式：

1. 受害人自行委托：受害人或其近亲属、代理人等可以自行选择并委托具备资质的鉴定机构进行伤残鉴定。这种方式较为常见，效率高，能较快得到鉴定结果，为后续协商赔偿提供依据。但需要注意的是，自行委托可能存在对方质疑鉴定结果中立性和合法性的风险。

2. 双方当事人共同委托：当事故双方当事人能够协商一致时，可以共同委托一家有资质的鉴定机构进行伤残鉴定。这种方式体现了双方的自愿和合作，有助于增强鉴定结果的公信力，并加快赔偿纠纷的解决进程。

3. 法院委托：在双方无法就鉴定机构的选择达成一致，或对自行委托的鉴定结果存在争议时，可以进入诉讼程序并由法院委托鉴定机构。法院会按照法定程序从具备资质的鉴定机构名录中随机抽取确定鉴定机构。法院委托的鉴定具有较高的权威性和公正性，因为法院的介入保证了鉴定机构选择的随机性和监督性。

综上所述，交通事故的伤残鉴定书可以由受害人自行委托、双方当事人共同委托或法院委托。在选择委托方式时，应考虑效率、公信力和法律权威性，并确保所选鉴定机构具备相应的资质和公信力，以保证鉴定结果的准确性和权威性。如果您在交通事故中需要进行伤残鉴定，或对相关法律问题有疑问，可以直接向我咨询。