回迁房只有回迁协议是不可以赠与婴儿的。具体分析如下：

一. 回迁协议的性质

• 回迁协议是拆迁办与被拆迁人就房屋拆迁补偿之间的协议，它本身只是一个协议，并不具有直接的财产性质。因此，回迁协议本身并不能作为赠与的标的物。

二. 回迁房赠与的前提

• 回迁房要赠与婴儿（或任何第三方），前提是回迁房必须已经转化为被拆迁人的合法财产，即已经取得了房屋所有权证。只有取得了房屋所有权证，业主才拥有对该房屋的处分权，包括赠与。

三. 法律依据

• 根据《国有土地上房屋征收与补偿条例》第二十五条，房屋征收部门与被征收人依照本条例的规定，就补偿方式、补偿金额和支付期限、用于产权调换房屋的地点和面积、搬迁费、临时安置费或者周转用房、停产停业损失、搬迁期限、过渡方式和过渡期限等事项，订立补偿协议。但这并未提及回迁协议可以赠与。
• 同时，根据《中华人民共和国民法典》的相关规定，赠与合同是赠与人将自己的财产无偿给予受赠人，受赠人表示接受赠与的合同。但在此案例中，回迁协议并非“财产”，因此不能赠与。

综上所述，在只有回迁协议的情况下，是无法将回迁房赠与婴儿的。必须等回迁房取得房屋所有权证后，才能通过合法的赠与手续将其赠与婴儿。如有进一步需要，您可以继续咨询我。