结论：赔偿金的支付与是否签署谅解书没有必然的法律联系，对方不能以“不签谅解书就不给赔偿金”作为条件，但谅解书可能影响赔偿的协商结果和刑事责任处理。

1. 赔偿金的支付是法定义务，与谅解书无关

根据《民法典》侵权责任编，因故意伤害导致他人残疾的，侵权人需承担残疾赔偿金、医疗费、护理费、误工费、精神损害抚慰金等法定赔偿责任。这些赔偿是法律明确规定的义务，不以受害方签署谅解书为前提。即使受害方拒绝签署谅解书，侵权人仍需通过民事诉讼或协商支付赔偿金。

2. 谅解书的作用：影响刑事责任与赔偿协商

谅解书是受害方对侵权人行为的谅解声明，通常在刑事案件中作为量刑参考依据。根据《刑事诉讼法》及相关司法解释，若侵权人积极赔偿并取得谅解，法院可能酌情从轻、减轻处罚（如缓刑或缩短刑期）。因此：

• 侵权人可能主动要求签署谅解书：通过承诺赔偿换取受害方谅解，以争取更轻的刑事处罚；
• 受害方可利用谅解书推动赔偿协商：若侵权人希望减轻刑事责任，受害方可要求其先支付赔偿金再签署谅解书，但需注意：谅解书是自愿行为，不能被强迫签署。

3. 实务建议：如何保障自身权益？

• 明确赔偿与谅解的独立性：若对方以“不签谅解书就不赔”威胁，可告知其赔偿是法定义务，拒绝支付可通过民事诉讼强制执行；
• 谨慎签署谅解书：谅解书可能影响刑事案件走向，签署前需确保赔偿金额、支付方式等条款明确写入协议，避免对方反悔；
• 保留证据：若对方拒绝赔偿，及时收集医疗记录、伤残鉴定报告等证据，通过法院起诉主张权利；
• 刑事与民事程序并行：故意伤害致残可能同时涉及刑事责任（如故意伤害罪）和民事赔偿，受害方可向公安机关报案追究刑事责任，同时提起民事诉讼要求赔偿。

总结：赔偿金是侵权人的法定义务，与谅解书无必然联系，但谅解书可能影响赔偿协商和刑事责任处理。若对方以此要挟，建议通过法律途径维护权益。如有进一步疑问，可直接向我咨询具体操作流程。