如果工伤不被认定，责任归属需根据具体情况来判断，一般可能涉及用人单位、社会保险行政部门或劳动者自身。以下从不同角度为你详细分析：

1. 用人单位的责任

   • 未及时申报工伤：根据《工伤保险条例》第十七条，职工发生事故伤害或者按照职业病防治法规定被诊断、鉴定为职业病，所在单位应当自事故伤害发生之日或者被诊断、鉴定为职业病之日起30日内，向统筹地区社会保险行政部门提出工伤认定申请。遇有特殊情况，经报社会保险行政部门同意，申请时限可以适当延长。如果用人单位未在规定时间内提交工伤认定申请，在此期间发生符合本条例规定的工伤待遇等有关费用由该用人单位负担。这意味着，如果因为用人单位的拖延或疏忽导致工伤未被及时认定，用人单位需要承担相应的责任。
   • 提供虚假材料或隐瞒事实：如果用人单位在工伤认定过程中提供虚假材料或隐瞒事实，导致工伤不被认定，用人单位不仅可能面临行政处罚，还可能需要承担因工伤未被认定而给劳动者造成的损失。

2. 社会保险行政部门的责任

   • 认定错误或程序违法：社会保险行政部门在工伤认定过程中，如果因为认定错误或程序违法导致工伤不被认定，劳动者可以依法申请行政复议或提起行政诉讼。在这种情况下，如果法院最终判决撤销原工伤认定决定并责令重新认定，且重新认定后确认为工伤，那么原认定错误或程序违法的社会保险行政部门可能需要承担一定的责任，但这主要是行政责任，对劳动者而言，更重要的是通过法律途径维护自己的合法权益。
   • 未依法履行职责：如果社会保险行政部门在收到工伤认定申请后，未依法履行职责，如未在规定时间内作出认定决定等，劳动者也可以依法维权。不过，这通常不会直接导致“工伤不被认定谁负责”的问题，而是会促使社会保险行政部门尽快履行职责或承担相应的行政责任。

3. 劳动者自身的责任

   • 未及时提供必要材料：劳动者在申请工伤认定时，需要提供一定的材料，如医疗证明、事故报告等。如果劳动者未及时提供这些必要材料，可能导致工伤认定延迟或不被认定。但这种情况下，责任更多在于劳动者未履行好自己的义务，而非直接导致“工伤不被认定”的责任归属问题。不过，如果因为劳动者未提供必要材料而导致工伤认定受阻，劳动者可能需要自行承担部分后果，如错过申请时效等。
   • 故意隐瞒或虚构事实：如果劳动者在申请工伤认定时故意隐瞒或虚构事实，如谎称是在工作时间和工作场所内因工作原因受到事故伤害等，一旦被发现，不仅工伤不会被认定，还可能面临法律责任。

建议：

• 对于劳动者而言，如果发生工伤事故，应及时向用人单位报告，并保留好相关证据材料。同时，要关注工伤认定的申请时限，确保在规定时间内提出申请。
• 对于用人单位而言，应严格遵守相关法律法规，及时为劳动者申报工伤，并提供真实、完整的材料。
• 如果对工伤认定结果有异议，无论是劳动者还是用人单位，都可以依法申请行政复议或提起行政诉讼来维护自己的合法权益。

如有更多疑问或需要进一步的法律帮助，请直接向我咨询。