结论：工伤认定书上写着“不慎在非工作地点造成的伤害”，并不意味着您一定要承担全部责任。是否需要承担责任，需结合具体情况和法律规定来判断。以下从不同角度为您详细分析：

1. 工伤认定的基本原则：

   • 根据《工伤保险条例》的相关规定，工伤认定主要考察伤害是否发生在“工作时间”和“工作场所”内，以及是否因“工作原因”受到事故伤害。若伤害发生在非工作地点，但符合“工作时间”和“工作原因”的条件，仍有可能被认定为工伤。
   • 例如，员工在工作时间因工作需要外出，在途中发生交通事故受伤，尽管事故发生在非工作地点，但仍可能被认定为工伤。

2. “非工作地点”的具体情形：

   • 因公外出：如上述例子，员工因工作需要外出，在途中发生的伤害，若符合工伤认定条件，应被认定为工伤，由工伤保险基金和用人单位承担相应责任。
   • 上下班途中：员工在上下班途中，受到非本人主要责任的交通事故或者城市轨道交通、客运轮渡、火车事故伤害的，也应被认定为工伤。这种情况下，尽管伤害发生在非工作地点，但法律有特别规定，员工无需承担责任。
   • 个人行为：若员工在非工作时间、非工作地点，且因个人行为（如私自外出游玩、购物等）受到伤害，则通常不被认定为工伤，此时员工可能需要自行承担责任。但这也并非绝对，如员工在个人行为中因工作相关的事务（如接听工作电话、处理工作邮件等）受到伤害，仍有可能被认定为工伤。

3. 责任承担的具体分析：

   • 若被认定为工伤：根据《工伤保险条例》的规定，员工应享受工伤保险待遇，包括医疗费、伤残津贴、一次性伤残补助金等。这些费用由工伤保险基金和用人单位承担，员工无需自行承担。
   • 若不被认定为工伤：员工可能需要通过其他途径（如医疗保险、商业保险或个人承担）来支付医疗费用。此时，员工是否需要承担责任，取决于其个人行为是否违反了公司规定或法律法规，以及是否存在其他责任主体（如交通事故中的对方司机）。

4. 建议与行动：

   • 申请工伤认定复议或诉讼：若您对工伤认定结果有异议，认为应被认定为工伤但未被认定，可以在收到认定书之日起60日内申请行政复议，或者在6个月内直接向人民法院提起行政诉讼。
   • 收集证据：在申请复议或诉讼过程中，您需要收集相关证据来证明伤害与工作有关，如工作记录、出差证明、交通事故责任认定书等。
   • 咨询专业律师：工伤认定和赔偿问题涉及复杂的法律程序和规定，建议您咨询专业律师以获取更详细的法律建议和帮助。

总结：工伤认定书上写着“不慎在非工作地点造成的伤害”并不意味着您一定要承担责任。是否需要承担责任取决于伤害是否发生在工作时间、工作场所内，以及是否因工作原因受到事故伤害。若您对工伤认定结果有异议，建议及时申请复议或诉讼，并收集相关证据来支持您的主张。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。