在高空抛物事件中，若找不到具体侵权人，整栋楼的居民并不一定都要承担责任。具体责任承担情况需根据以下法律分析和实际情况综合判断：

1. 基本法律责任原则：

   • 根据《中华人民共和国民法典》第一千二百五十四条，从建筑物中抛掷物品或者从建筑物上坠落的物品造成他人损害的，由侵权人依法承担侵权责任。

2. 可能加害的建筑物使用人的补偿责任：

   • 若经调查难以确定具体侵权人，除能够证明自己不是侵权人的外，由可能加害的建筑物使用人给予补偿。这里的“可能加害的建筑物使用人”包括建筑物的所有人、承租人、借用人等实际使用建筑物的人。
   • 若后续找到具体侵权人，已给予补偿的可能加害人享有追偿权利。

3. 物业服务企业等建筑物管理人的责任：

   • 物业服务企业等建筑物管理人应采取必要的安全保障措施，如安装监控、进行安全宣传等，以防止高空抛物事件的发生。
   • 若物业等企业未履行安全保障义务，导致难以确定侵权人或加剧了损害后果，则可能需承担相应的侵权责任或补充责任。

4. 实际案例与法律建议：

   • 在实际操作中，若能提供确凿证据（如不在场证明）证明自己没有抛物的可能，则可依法免责。
   • 若无法确定具体责任人，且物业服务企业存在管理瑕疵，可能会依据过错程度让其承担相应补充责任。
   • 面对高空抛物事件，建议受害者或相关责任人及时收集证据，并咨询专业律师以获取具体的法律建议和帮助。

综上所述，高空抛物找不到具体侵权人时，并非整栋楼都要承担责任，而是需根据具体情况和法律规定来判断责任归属。若您有此类法律问题，可直接向我咨询，我将为您提供专业的法律分析和建议。