责任认定书上面拒签是可以的，但这并不影响其法律效力。下面我会详细解释这一点，并给出相关的法律建议。

一、责任认定书的法律效力

责任认定书是交通管理部门或其他相关机构对事故责任等情况作出的专业认定文件，具有法律效力。这份文件是基于现场勘查、调查取证等程序得出的专业性结论，其效力不因当事人的拒签而改变。无论当事人是否签字，该认定书在处理相关事务中均作为重要依据。

二、拒签责任认定书的后果

1. 不影响生效：即使当事人拒签责任认定书，该认定书在按照法定程序送达后依然生效。拒签并不改变其作为法律证据的地位。

2. 复核申请权利：根据《交通安全法》等相关法律规定，当事人对道路交通事故责任认定有异议的，可在收到认定书之日起一定期限内（通常为3日）向上一级交警部门提出书面复核申请。复核申请应载明复核请求、理由和主要证据。若因拒签而错过复核期限，将失去纠正可能存在错误认定的机会。

3. 影响调解与诉讼：拒签责任认定书可能意味着放弃调解机会，但不影响当事人通过诉讼途径维护自己的权益。在诉讼中，当事人可以提出对责任认定书的质疑，并提供足以推翻该认定书的证据。

三、法律建议

1. 认真阅读：在收到责任认定书后，务必认真阅读并理解其内容，确认事故责任划分是否合理。

2. 及时复核：如有异议，应在规定期限内提出复核申请，并附上充分的理由和证据。这是纠正错误认定的重要途径。

3. 保留证据：无论是否签字，都应妥善保留相关证据，如现场照片、证人证言等，以备后续使用。

4. 咨询专业意见：在处理此类问题时，如有需要，可以寻求专业律师的帮助，以获取更准确的法律建议和指导。

综上所述，虽然责任认定书可以拒签，但这并不影响其法律效力。当事人应认真对待这份文件，如有异议应及时提出复核申请，并妥善保留相关证据以维护自己的权益。