对方迟迟不去签责任认定书，并不会影响事故责任认定书的生效和效力。以下是针对此问题的详细解答：
一、责任认定书的性质与效力
- 性质：交通事故责任认定书是公安交通管理部门通过对交通事故现场勘察、技术分析和有关检验、鉴定结论，分析查明交通事故的基本事实、成因和当事人责任后所作的技术性结论。
- 效力：该结论不具有拘束力和执行力，仅作为处理交通事故的证据使用。其目的在于为交通事故的处理提供事实依据和法律依据，帮助确定当事人的责任大小。
二、对方不签字的影响及处理方式
- 不影响生效：根据《道路交通事故处理程序规定》，交通事故责任认定书应当载明交通事故的基本事实、成因和当事人的责任，并送达当事人。即使对方不签字，只要交警部门依法作出了责任认定，该认定书即具有法律效力。
- 视为送达：如果对方拒绝签收，交警部门可以通过留置送达等方式视为已送达。此时，责任认定书同样产生法律效力。
三、后续处理建议
保留证据：
- 确保自己手中留有责任认定书的副本或相关证明文件，如交警部门出具的送达回证等，以备不时之需。
协商赔偿：
- 在责任认定书生效后，可以尝试与对方协商赔偿事宜。如果双方能够达成一致意见，可以签订赔偿协议并履行。
- 协商时，注意保留好相关证据，如协商记录、赔偿协议等，以便在后续处理中提供有力证明。
申请调解或诉讼：
- 如果协商不成，可以向公安机关交通管理部门申请调解。调解时，可以依据责任认定书确定的责任大小，提出合理的赔偿要求。
- 如果调解不成，或者对方拒绝参与调解，可以向人民法院提起民事诉讼，要求对方承担相应的赔偿责任。
- 诉讼时，务必保留好相关证据，如现场照片、医疗记录、证人证言等，以便在诉讼中提供有力证明。
注意时效：
- 在处理此类纠纷时，务必注意法律规定的时效期间。例如，向人民法院请求保护民事权利的诉讼时效期间通常为三年，自权利人知道或者应当知道权利受到损害以及义务人之日起计算。
- 如果超过时效期间提起诉讼，可能会丧失胜诉权。因此，建议及时采取行动，维护自己的合法权益。
四、特殊情况处理
- 如果交警部门因对方不签字而迟迟未出具责任认定书，当事人可以采取以下措施：
- 提醒交警部门：向交警部门提醒相关法律规定，要求其按法定期限和程序及时出具认定书。
- 积极沟通：与负责处理事故的交警沟通，了解不出具认定书的真实原因，并尝试消除误解。
- 向上级反映：如果沟通无果，可以向上一级公安机关交通管理部门反映情况，请求监督和审查。
- 法律途径：如果认为交警部门的行为违法或不当，可以在知道具体行政行为之日起六十日内提出行政复议申请，或者选择直接向有管辖权的人民法院提起行政诉讼。
如有任何疑问或需要进一步的法律帮助，请随时向我咨询。我会根据你的具体情况，提供更为详细和专业的法律建议。