一般情况下，被保险人或相关方不可以直接拒绝保险公司的第三方调查，但在特定情形下可提出异议或限制调查范围。具体分析如下：

1. 保险合同中的调查权条款
   保险合同通常明确约定，保险公司有权在理赔时委托第三方机构（如公估公司、调查公司）核实事故真实性、损失程度及被保险人是否履行如实告知义务。此条款属于保险法赋予保险公司的法定权利，被保险人需配合调查，否则可能构成违约，影响理赔结果。

2. 调查的合法性边界
   第三方调查必须遵守法律程序，不得侵犯被保险人合法权益：

   • 隐私权保护：调查内容应限于与保险事故直接相关的信息（如医疗记录、事故现场证据），不得非法获取被保险人私密信息（如通话记录、银行流水等）。
     
   • 调查手段合法：禁止采用跟踪、窃听、威胁等非法手段收集证据，否则被保险人有权拒绝配合并报警处理。
     
   • 身份告知义务：调查人员需主动出示授权文件及身份证明，否则被保险人有权要求其离开并联系保险公司核实身份。

3. 可拒绝配合的例外情形

   • 调查范围超出合同约定：若保险公司要求提供与理赔无关的材料（如非事故期间的健康记录），被保险人可明确拒绝并要求保险公司书面说明调查必要性。
     
   • 调查程序违法：如调查人员未出示合法证件、强行闯入私人场所或要求提供非法证据，被保险人可立即终止配合并保留证据（如录音、录像）。
     
   • 已通过其他途径证明事实：若被保险人已提供充分证据（如交警事故认定书、医院诊断证明），且保险公司无合理理由怀疑真实性，可拒绝重复调查。

4. 拒绝配合的法律后果

   • 理赔风险：若被保险人无正当理由拒绝配合调查，保险公司可能依据合同条款拒赔或解除合同，且无需承担赔偿责任。
     
   • 举证责任转移：在诉讼中，若保险公司能证明已履行调查义务而被保险人拒不配合，法院可能推定保险公司主张成立（如事故真实性存疑）。

建议行动步骤：

1. 要求调查人员出示保险公司授权书及本人身份证明，核对调查范围是否与理赔事项相关；
   
2. 对涉及个人隐私的调查要求（如非事故期间的医疗记录），可书面要求保险公司说明必要性；
   
3. 若发现调查程序违法，立即终止配合并联系保险公司投诉，必要时向银保监会举报或报警；
   
4. 保留所有沟通记录及调查材料，作为后续维权证据。
   

如有具体案件细节（如调查内容、方式等），可进一步向我咨询，我将结合事实与法律条款提供针对性分析。