判决书因打不通电话被退回，责任在于提供或确认送达地址的受送达人。下面是对此结论的详细分析：

一. 责任归属分析

1. 受送达人的责任：根据《最高人民法院关于以法院专递方式邮寄送达民事诉讼文书的若干规定》第十一条，若受送达人自己提供或者确认的送达地址不准确、拒不提供送达地址、送达地址变更未及时告知人民法院，导致诉讼文书未能被实际接收的，文书退回之日视为送达之日。在此情况下，由于电话打不通导致判决书被退回，若该电话是受送达人提供或确认的联系方式，则责任应由受送达人承担。
2. 受送达人无过错的情形：同一法条规定，受送达人能够证明自己在诉讼文书送达的过程中没有过错的，不适用前款规定。即，如果受送达人能证明电话打不通并非自己的过错（如电话故障、运营商问题等），则不承担责任。但此情况下，受送达人需及时告知法院并提供新的联系方式，以确保诉讼文书的顺利送达。

二. 实际影响与应对

• 实际上，判决书被退回视为送达，可能会影响受送达人的诉讼权利，如上诉期限的计算等。因此，受送达人应高度重视送达问题，确保提供的送达地址和联系方式准确无误。
• 如因特殊原因导致无法接收诉讼文书，受送达人应及时与法院沟通，说明情况并提供新的送达方式或地址。

综上所述，判决书因打不通电话被退回，责任主要在于提供或确认送达地址的受送达人。为避免此类情况发生，受送达人应谨慎提供联系方式，并在联系方式发生变化时及时告知法院。如有进一步需要，您可以继续咨询我。