不能因对方无驾驶证且双方未买交强险就不赔偿其伤残金。下面我来详细解释这个问题：

首先，我们要明确的是，交通事故的赔偿责任并不是简单地根据双方是否有驾驶证或是否购买了交强险来决定的。赔偿责任的划分主要依据的是事故发生时双方的行为对事故发生所起的作用以及过错的程度。

1. 关于驾驶证：

   • 对方没有驾驶证，这确实是一个违法行为，也可能对事故的发生有一定的影响。但这并不意味着你就可以因此免除赔偿责任。因为赔偿责任的划分是综合考虑多方面的因素，而不仅仅是对方是否有驾驶证。

2. 关于交强险：

   • 交强险是强制保险，用于保障交通事故受害人的基本权益。双方都没有买交强险，这确实是一个遗憾的情况，但这同样不是决定赔偿责任划分的唯一因素。没有交强险，只意味着在赔偿时可能缺乏保险公司的参与，但不影响赔偿责任的本身。

3. 赔偿责任的划分：

   • 在交通事故中，如果双方都有过错，那么赔偿责任通常是按照各自过错的比例来划分的。即使对方没有驾驶证，但如果他的行为并不是导致事故发生的唯一或主要原因，那么你仍然需要承担相应的赔偿责任。
   • 伤残金是赔偿给受害人因其身体受到伤害而导致的经济损失和精神损害的一种补偿。如果对方确实因事故受到了伤残，且你对此负有一定的责任，那么你就需要赔偿对方的伤残金。

综上所述，你不能仅因对方无驾驶证且双方未买交强险就拒绝赔偿其伤残金。赔偿责任的划分需要综合考虑多方面的因素，包括双方的行为、过错程度以及事故发生的具体情况等。如果你对赔偿责任有异议，建议通过法律途径进行解决，比如申请交警部门调解或向法院提起诉讼。