针对您提出的“来到工地没干活身故怎么赔偿”的问题，这确实是一个涉及法律知识的复杂问题，需要我们从多个角度进行详细分析。
首先，我们要明确的是，尽管工人来到工地后并未实际开始工作，但如果其身故与工地环境、工作条件或工地管理方的行为存在直接关联，那么工地管理方或相关责任方仍可能需要承担赔偿责任。具体来说，赔偿责任的判定主要取决于以下几个因素：
合同关系：
- 如果工人与施工单位已经签订了劳动合同或存在事实劳动关系，即使尚未开始工作，但因其已经处于施工单位的管理之下，若身故与工地环境或工作条件有关，施工单位可能需承担一定的赔偿责任。
- 如果工人与雇主之间形成的是劳务关系，那么赔偿责任的判定将更多地依赖于劳务合同的具体内容以及事故发生的具体原因。
事故原因：
- 如果工人的身故是由于工地管理方的疏忽、违反安全规定或未提供必要的安全保障措施导致的，那么工地管理方将承担主要的赔偿责任。
- 如果工人的身故是由第三方侵权行为导致的，如其他工程车辆的违规操作，那么第三方侵权人将承担侵权赔偿责任。同时，如果工地管理方在安全管理等方面存在过错，也可能需承担补充赔偿责任。
保险情况：
- 如果施工单位为工人缴纳了工伤保险，那么根据工伤保险的相关规定，工伤保险基金可能会支付部分赔偿费用，如丧葬补助金、供养亲属抚恤金等。但需要注意的是，工伤保险的赔偿范围和标准是有明确规定的，可能无法覆盖全部损失。
- 如果工人未参加工伤保险，那么赔偿责任将主要由施工单位或雇主承担。
在实际操作中，我建议您采取以下步骤来维护自身权益：
- 及时咨询专业律师：律师能够根据您的具体情况，提供更准确的法律分析和赔偿建议。
- 收集证据材料：积极收集与事故相关的证据材料，如劳动合同、事故现场照片、医疗记录等，这些证据将对于后续的维权过程至关重要。
- 依法维权：通过法律途径来维护自身合法权益，避免采取过激行为或私下解决导致不利后果。
综上所述，来到工地没干活身故的赔偿责任主体需根据具体情况综合判断。我建议您尽快咨询专业律师，以便更准确地了解自身权益和赔偿途径，并积极收集证据材料，为后续的维权过程做好充分准备。