赔付谅解书的钱不能算到退赃的数额里面。下面我将从法律角度和逻辑层面进行详细解释：

法律角度

1. 退赃的定义：

   • 退赃，是指犯罪分子将其通过非法手段获得的财物退还给被害人或上缴给司法机关的行为。
   • 退赃是刑事法律程序中的一部分，通常与犯罪嫌疑人的悔罪态度、量刑情节等相关联。

2. 赔付谅解书的性质：

   • 赔付谅解书通常是在民事纠纷或刑事案件中，加害人为了获得被害人的谅解而主动进行的经济赔偿。
   • 这种赔偿是基于双方自愿达成的民事协议，其目的主要是为了修复受损的社会关系，减轻加害人的刑事责任。

3. 两者的区别：

   • 退赃是犯罪嫌疑人对其非法所得的处理，具有强制性；而赔付谅解书是基于双方协商的民事赔偿，具有自愿性。
   • 退赃的财物必须是被害人或司法机关能够确认的非法所得；而赔付谅解书的金额则是由双方协商确定的，不一定与非法所得直接相关。

逻辑层面

1. 目的不同：

   • 退赃的主要目的是恢复被破坏的社会秩序，体现法律的公正性；而赔付谅解书的主要目的是通过经济赔偿来修复受损的社会关系，减轻加害人的刑事责任。

2. 处理方式不同：

   • 退赃通常是在刑事法律程序中由司法机关进行处理；而赔付谅解书则是由加害人和被害人双方自行协商达成的。

3. 法律后果不同：

   • 退赃可以作为量刑情节之一，影响犯罪嫌疑人的刑事责任；而赔付谅解书虽然可以在一定程度上减轻加害人的刑事责任，但其本身并不构成退赃。

综上所述，赔付谅解书的钱与退赃的数额是两个不同的概念，不能混为一谈。在实际操作中，应严格区分两者的性质和目的，确保法律的公正性和严肃性。如果你对此类问题还有疑问或需要进一步的法律帮助，请直接向我咨询。