在赔偿协议签完后，保险公司向对方支付赔偿款时，您自己应当保留以下关键证据，以确保自身权益并预防潜在纠纷：

1. 赔偿协议原件或复印件
   这是最核心的证据，需确保协议内容完整、签字盖章齐全。协议中应明确赔偿金额、支付方式、责任划分等关键条款。若原件需交予保险公司或对方，务必留存复印件或扫描件，并注明“与原件一致”。

2. 支付凭证
   若您已先行垫付赔偿款，需保留转账记录、收据或发票等支付证明。若保险公司直接支付，可要求对方或保险公司提供支付成功的书面确认（如银行流水、付款回单），并注明款项用途（如“XX事故赔偿款”）。

3. 沟通记录
   保留与保险公司、对方或第三方（如交警、调解机构）的书面沟通记录，包括邮件、短信、微信聊天记录等。这些记录可证明您已履行协议义务，或对方对赔偿方案的认可。

4. 事故相关证据
   根据事故类型（如交通事故、人身伤害），保留事故认定书、医疗记录、鉴定报告、现场照片等原始材料。这些证据能佐证赔偿协议的合理性，防止对方事后反悔或主张额外赔偿。

5. 对方身份及联系方式
   保留对方的身份证复印件、联系方式、住址等信息。若对方为法人或其他组织，需留存营业执照、授权委托书等文件。这些信息在后续执行或维权时至关重要。

6. 公证或见证材料（如有）
   若赔偿协议经过公证或第三方见证（如律师、调解委员会），务必留存公证书或见证文件。这类证据具有更高的证明力，能有效降低纠纷风险。

注意事项：

• 所有证据需保留原件或可验证的电子版本，避免仅依赖口头承诺。
  
• 若涉及大额赔偿或复杂纠纷，建议将协议及证据交由律师审核，确保无遗漏或法律风险。
  
• 定期整理证据，按时间或类别分类存档，便于后续查阅或使用。
  

如有其他法律问题，欢迎直接向我咨询。