在工伤涉及人身损害赔偿的情况下，双方（即用人单位或侵权方与劳动者）是否都有责任，需根据具体情形来判断，不能一概而论。以下从不同角度进行分析：

一、第三方侵权导致的工伤

如果工伤是由第三方侵权行为导致的，例如劳动者在上班路上遭遇非本人主要责任的交通事故，那么侵权方（如肇事司机）需要承担主要的赔偿责任。在这种情况下，侵权方是主要责任方，而劳动者仍然有权享受工伤保险待遇。这意味着，劳动者可以同时获得侵权方的赔偿和工伤保险的补偿，两者并不冲突。

二、用人单位原因引发的工伤

如果工伤是由于用人单位的原因引发的，比如工作环境恶劣、设备故障等，那么用人单位通常需要承担主要责任。然而，如果劳动者自身存在违规操作等过错行为，用人单位的赔偿责任可能会适当减轻。具体减轻的程度需要根据劳动者的过错程度、事故发生的具体情况以及相关法律法规的规定来确定。

三、责任划分的综合考虑因素

在工伤涉及人身损害赔偿的情况下，责任的划分需要综合考虑多种因素，包括但不限于：

1. 事故发生的原因：是第三方侵权、用人单位原因还是劳动者自身过错导致的。
2. 各方的过错程度：根据各方的行为对事故发生的影响大小来确定责任比例。
3. 相关法律法规的规定：依据《工伤保险条例》、《民法典》等相关法律法规的规定来确定责任划分。

四、法律建议

1. 及时收集证据：在发生工伤事故后，劳动者应及时收集相关证据，如医疗票据、事故现场照片、证人证言等，以便在后续的责任划分和赔偿协商中占据有利地位。
2. 咨询专业律师：由于工伤涉及人身损害赔偿的责任划分比较复杂，建议劳动者在发生事故后及时咨询专业律师，以便更好地维护自己的合法权益。
3. 依法维权：在责任划分和赔偿协商过程中，劳动者应依法维权，不要采取过激行为或放弃自己的合法权益。

举例说明：假设某劳动者在上班路上遭遇交通事故，且自己不是主要责任方。那么，肇事司机需要承担主要的赔偿责任，包括医疗费、误工费、护理费等。同时，该劳动者仍然有权享受工伤保险待遇，如一次性伤残补助金等。如果劳动者自身存在违规行为（如未佩戴安全带），可能会在一定程度上减轻肇事司机的赔偿责任。

综上所述，工伤涉及人身损害赔偿时双方是否都有责任需根据具体情形来判断。如果你或你身边的人遇到了类似的问题，可以直接向我咨询，我会根据你的具体情况提供详细的法律建议。