结论：单位钥匙借给别人后单位要求赔偿，是否需要承担赔偿责任不能一概而论，需分情况讨论，具体如下：
- 若借钥匙行为未给单位造成实际损失
- 从法律层面讲，单位要求赔偿缺乏事实依据。因为赔偿的前提是存在实际损害结果，若只是将钥匙借出，单位财产未遭受任何损失，比如没有发生财物被盗、设备损坏等情况，那么单位无权要求你支付赔偿金。
- 在这种情况下，你可以与单位进行沟通，向单位说明情况，表明钥匙借出并未造成不良后果，单位的要求是不合理的。如果单位坚持索赔，你可以要求单位提供造成损失的证据，若单位无法提供，你可以拒绝赔偿。
- 若借钥匙行为给单位造成了实际损失
- 存在过错的情况：如果你在借钥匙过程中存在过错，例如未经单位允许擅自将钥匙借给他人，或者明知借钥匙的人可能会利用钥匙进行不当行为仍借出，导致单位财产受损，那么你可能需要承担一定的赔偿责任。根据《中华人民共和国民法典》第一千一百六十五条规定，行为人因过错侵害他人民事权益造成损害的，应当承担侵权责任。具体赔偿金额会根据损失的大小以及你在事件中的过错程度来确定。比如，单位因钥匙被借出导致财物被盗，损失了5000元，而法院认定你在借钥匙事件中存在一定过错，可能会判决你承担部分赔偿责任，如2000元。
- 不存在过错的情况：如果你在借钥匙过程中没有过错，比如是按照单位的指示将钥匙借给特定人员，或者尽到了合理的注意义务，但仍发生了损害结果，那么你可能不需要承担赔偿责任。不过，在这种情况下，你需要提供相关证据证明自己没有过错，例如单位的书面指示、与借钥匙人的沟通记录等，以证明自己已经尽到了应有的谨慎和注意。
建议：
- 无论是否需要承担赔偿责任，都建议与单位进行友好协商，尽量通过沟通解决问题，避免矛盾激化。
- 如果与单位无法达成一致意见，单位坚持索赔且你认为不合理，可以收集相关证据，如借钥匙的聊天记录、单位的规章制度等，通过法律途径维护自己的合法权益。可以向劳动争议仲裁机构申请仲裁（如果涉及劳动关系），或者直接向人民法院提起诉讼。