如果人平白无故被建筑物脱落造成损害，且管理人、使用人不能证明自己无过失，那么应当由所有人、管理人或者使用人承担侵权责任。以下是详细分析：

法律解释

根据相关法律法规，建筑物、构筑物或者其他设施及其搁置物、悬挂物发生脱落、坠落造成他人损害，所有人、管理人或者使用人不能证明自己没有过错的，应当承担侵权责任。这意味着，在建筑物脱落致人损害的情况下，除非所有人、管理人或者使用人能够证明自己没有过错，否则他们就需要承担相应的侵权责任。

具体情况分析

1. 所有人承担责任：

   • 如果建筑物的所有人不能证明自己对于建筑物的维护、管理没有过错，那么他们需要对因建筑物脱落造成的损害承担赔偿责任。

2. 管理人承担责任：

   • 如果建筑物的管理人（如物业管理公司）负责建筑物的日常维护和管理，且不能证明自己已经尽到了应有的管理职责，那么他们也需要对损害承担赔偿责任。

3. 使用人承担责任：

   • 在某些情况下，建筑物的使用人（如租户）可能也需要对损害承担责任，特别是当他们的使用行为导致了建筑物脱落或者他们未能及时发现并报告潜在的安全隐患时。

4. 追偿权：

   • 所有人、管理人或者使用人在承担赔偿责任后，如果发现有其他责任人（如施工单位、维修单位等）对建筑物的脱落负有责任，他们有权向这些责任人进行追偿。

结论

综上所述，如果人平白无故被建筑物脱落造成损害，且管理人、使用人不能证明自己无过失，那么应当由所有人、管理人或者使用人承担侵权责任。在实际情况中，具体由谁承担责任还需要根据案件的具体情况和证据来判定。如果您遇到了类似的问题，建议您及时收集证据并咨询专业律师以维护自己的合法权益。