在承包人死亡或伤残的情况下，赔偿责任的认定需根据具体情况，结合相关法律法规进行综合分析。以下是从不同角度对这一问题的详细解答：
一、承包人死亡时的赔偿责任认定
合同相对性原则：
- 若承包人以个人名义签订承包合同，且合同中未约定承包人死亡后合同权利义务的承继方式，则承包人死亡后，合同可能因一方主体消灭而终止。此时，若因合同终止导致发包方或其他相关方遭受损失，原则上应由承包人的遗产继承人（如有）在继承遗产的范围内承担相应的民事责任，但这通常限于遗产继承的范畴，并不直接等同于合同责任。
- 若承包人以公司或企业名义签订承包合同，则承包人死亡不影响合同的效力，公司或企业应继续履行合同义务，并承担因违约等造成的赔偿责任。
工伤保险与雇主责任：
- 若承包人雇佣了员工，且员工在从事承包工作时因工死亡，根据《工伤保险条例》等相关规定，承包人（或其所在单位）应承担工伤保险责任，支付工伤保险待遇。若承包人未为员工购买工伤保险，则相关赔偿责任可能由承包人（或其遗产继承人）承担。
侵权责任：
- 若承包人的死亡是由第三方的侵权行为导致的，如交通事故、故意伤害等，则侵权方应承担相应的侵权责任，包括赔偿死亡赔偿金、丧葬费等。
二、承包人伤残时的赔偿责任认定
合同责任：
- 若承包人因自身原因（如疏忽、过失）导致伤残，且该伤残影响了合同的履行，发包方可能根据合同条款要求承包人承担违约责任，如赔偿损失、支付违约金等。但需注意，违约责任通常限于合同约定的范围。
工伤保险与雇主责任：
- 若承包人雇佣了员工，且员工在从事承包工作时因工伤残，承包人（或其所在单位）应承担工伤保险责任，支付工伤保险待遇，包括医疗费、伤残津贴等。
- 若承包人自身在工作过程中受伤，且符合工伤保险的认定条件，其也可享受工伤保险待遇。但需注意，若承包人未购买工伤保险，则相关费用可能需由其自行承担或通过其他途径解决。
侵权责任：
- 若承包人的伤残是由第三方的侵权行为导致的，如交通事故、产品责任等，则侵权方应承担相应的侵权责任，包括赔偿医疗费、误工费、残疾赔偿金等。
三、特殊情况下的赔偿责任认定
- 挂靠经营：若承包人挂靠其他单位进行经营，且因挂靠关系导致赔偿责任的产生，被挂靠单位可能需承担连带责任。但具体责任划分需根据挂靠协议、实际经营情况等因素综合判断。
- 合伙承包：若承包人以合伙形式进行承包，且因合伙事务导致赔偿责任的产生，合伙各方应按照合伙协议的约定或法律规定承担连带责任。
四、法律建议
- 完善合同条款：在签订承包合同时，应明确约定合同终止、违约责任、保险购买等条款，以降低因承包人死亡或伤残导致的法律风险。
- 购买工伤保险：承包人应为其雇佣的员工购买工伤保险，以分散工伤风险。同时，若承包人自身从事高风险工作，也可考虑购买个人意外伤害保险。
- 及时咨询专业律师：在发生承包人死亡或伤残事件后，应及时咨询专业律师，了解相关法律法规和赔偿程序，以便更好地维护自身权益。
若您在此类问题上还有疑问或需要进一步的法律帮助，请直接向我咨询。