结论前置：委托人能否起诉代理人，取决于代理人的签字行为是否构成违约、侵权或存在其他法律责任情形。以下从不同法律角度进行详细分析：

1. 合同违约角度：

   • 若代理人签字行为超出授权范围：根据《中华人民共和国民法典》第一百七十一条：“行为人没有代理权、超越代理权或者代理权终止后，仍然实施代理行为，未经被代理人追认的，，对被代理人不发生效力。” 若代理人在赔偿协议中签字的行为超出了委托人授予的代理权限，且未经委托人追认，则该签字行为对委托人不产生法律效力。此时，若因代理人签字给委托人造成损失，委托人有权依据《民法典》中关于无权代理或表见代理的规定，起诉代理人要求赔偿损失。
   • 若代理人签字行为在授权范围内但违反合同义务：如果代理人的签字行为虽然在其授权范围内，但违反了与委托人之间的合同约定（如代理人应谨慎处理事务而未尽到谨慎义务），则委托人可以依据合同约定，起诉代理人承担违约责任。

2. 侵权责任角度：

   • 若代理人签字行为损害委托人利益：根据《中华人民共和国民法典》第一千一百六十五条：“行为人因过错侵害他人民事权益造成损害的，应当承担侵权责任。” 若代理人在签字过程中存在过错（如故意或重大过失），导致委托人利益受损，委托人可以依据侵权责任法的规定，起诉代理人要求赔偿损失。

3. 其他法律责任情形：

   • 若代理人与第三方恶意串通：如果代理人与赔偿协议的另一方恶意串通，损害委托人利益，根据《民法典》第一百五十四条：“行为人与相对人恶意串通，损害他人合法权益的民事法律行为无效。” 委托人不仅可以起诉代理人，还可以要求确认赔偿协议无效，并追究代理人与第三方的连带责任。
   • 若代理人存在欺诈、胁迫等行为：若代理人在签字过程中存在欺诈、胁迫等行为，导致委托人遭受损失，委托人可以依据相关法律规定，起诉代理人要求撤销赔偿协议并赔偿损失。

法律建议：

• 委托人在发现代理人签字行为可能存在问题时，应首先收集相关证据，包括赔偿协议、授权委托书、代理人签字时的相关记录等。
• 委托人应咨询专业律师，对代理人的签字行为进行法律评估，确定是否存在违约、侵权或其他法律责任情形。
• 根据律师的建议，委托人可以选择与代理人协商解决，或者通过诉讼等法律途径维护自己的合法权益。

可能法律后果：

• 若代理人被认定存在违约、侵权或其他法律责任情形，可能需要承担赔偿损失、恢复原状、赔礼道歉等法律责任。
• 若赔偿协议被确认无效或被撤销，代理人与第三方之间的权利义务关系将恢复至协议签订前的状态。

如有具体法律问题，可以直接向我咨询，我将结合具体情况为你提供更详细的法律分析和建议。