受害人一般不可以直接起诉保险公司，但在特定情况下可以突破合同相对性直接起诉。以下为详细分析：

1. 合同相对性原则下的常规情况
   根据《保险法》第六十五条，责任保险的保险标的是被保险人对第三者依法应负的赔偿责任。在常规法律框架下，保险合同具有相对性，即保险合同仅约束保险人与被保险人（建筑工地责任方）。受害人与保险公司之间不存在直接合同关系，因此原则上受害人无权直接起诉保险公司，需先向被保险人主张赔偿。若被保险人未履行赔偿义务，受害人可通过诉讼要求被保险人承担责任，再由被保险人依据保险合同向保险公司申请理赔。

2. 法律特别规定的例外情形
   若符合以下条件，受害人可直接突破合同相对性起诉保险公司：

   • 被保险人怠于请求：当被保险人对第三者（受害人）的赔偿责任已由生效法律文书确认，且被保险人未向保险公司请求赔偿时，受害人可直接以自己名义行使保险金请求权（《保险法》第六十五条第二款）。例如，法院判决建筑公司赔偿受害人100万元，但建筑公司未向保险公司索赔，此时受害人可直接起诉保险公司要求支付赔偿款。
     
   • 责任性质明确且金额确定：需满足“责任确定、赔偿金额明确”的条件，通常需以生效判决或仲裁裁决为前提。若责任尚未通过法律程序确认，受害人需先通过诉讼或仲裁明确被保险人的赔偿责任。
     
   • 保险条款无特别限制：若保险合同中未约定“受害人需先向被保险人索赔”等限制性条款，则更有利于受害人直接起诉。

3. 实务操作建议

   • 优先协商与诉讼被保险人：受害人应首先向建筑工地责任方（如施工单位、承包方）主张赔偿，通过协商或诉讼明确赔偿责任及金额。
     
   • 及时固定证据：保留事故现场照片、医疗记录、工伤认定书等证据，以证明损害事实与责任关联。
     
   • 关注保险合同条款：若涉及工程一切险、雇主责任险等险种，需审查保险合同中关于“第三者直接索赔”的约定，部分商业保险可能放宽索赔主体限制。
     

总结：受害人能否直接起诉保险公司需结合具体案情判断。在责任明确且被保险人怠于索赔时，法律赋予受害人直接起诉权；其他情况下，需遵循合同相对性原则。若您遇到此类纠纷，可进一步提供事故细节（如保险类型、责任认定情况等），我将为您分析具体操作路径。