别人在我家施工掉下，责任的认定需根据具体情况来判断。以下是详细的法律分析：
一. 施工单位是否购买工伤保险
已购买工伤保险
- 根据《工伤保险条例》第十七条，职工发生事故伤害，所在单位应当自事故伤害发生之日起30日内，向社会保险行政部门提出工伤认定申请。
- 一旦工伤被认定，受伤的施工人员可以根据《中华人民共和国社会保险法》第三十八条和第三十九条的规定，享受工伤保险待遇，包括医疗费用、康复费用、住院伙食补助费、交通食宿费等。
未购买工伤保险或不符合工伤认定条件
- 根据《中华人民共和国民法典》第一千二百五十八条，如果施工人不能证明已经设置明显标志和采取安全措施，那么施工人应当承担侵权责任。这意味着，如果施工人员在施工现场因未设置明显标志或未采取安全措施而受伤，施工单位应承担相应的赔偿责任。
- 受伤的施工人员可以根据《中华人民共和国民法典》第一千一百七十九条的规定，要求赔偿医疗费、护理费、交通费等为治疗和康复支出的合理费用，以及因误工减少的收入。如果造成残疾，还可以要求赔偿辅助器具费和残疾赔偿金。
二. 施工单位的资质与责任
- 根据《中华人民共和国建筑法》第二十九条，建筑工程总承包单位可以将承包工程中的部分工程发包给具有相应资质条件的分包单位。禁止总承包单位将工程分包给不具备相应资质条件的单位。
- 如果发包人、分包人知道或者应当知道接受发包或者分包业务的雇主没有相应资质或者安全生产条件的，根据《最高人民法院关于审理人身损害赔偿案件适用法律若干问题的解释》第十一条，发包人、分包人应当与雇主承担连带赔偿责任。
三. 受伤者的责任
- 如果受伤者未经允许擅自进入施工区域，且受伤是由于其自身疏忽或故意行为导致的，那么责任可能主要由受伤者自己承担。
我的观点：在认定责任时，应综合考虑施工单位是否购买工伤保险、是否具备相应资质、是否采取了必要的安全措施，以及受伤者是否存在过错等因素。如有进一步需要，您可以继续咨询我。