当调解员打给被告的电话不被接听时，这确实可能会给调解进程带来一定的困扰，但不必过于焦虑。以下是一些建议，帮助您应对这种情况：

一、了解调解流程与机构

首先，需要明确调解的发起方和具体流程。如果调解是由法院组织的，那么法院通常会采取多种方式来确保调解通知能够送达给被告，包括但不限于电话通知、邮寄送达、留置送达以及公告送达等。了解这一点后，您可以更加安心地等待法院的进一步行动。

二、主动联系调解组织者

如果您意识到错过了调解员的电话，或者长时间没有收到调解通知，建议您主动联系调解的组织者或相关法院。在联系时，您可以：

1. 说明情况：向调解组织者解释您错过电话的原因，比如手机静音、信号不好等。
2. 表达意愿：明确表达您希望参与调解的强烈愿望，并询问是否可以重新安排调解时间。
3. 提供联系方式：确保调解组织者有您最新的、有效的联系方式，以便他们能够及时与您取得联系。

三、配合法院工作

在调解过程中，配合法院的工作是非常重要的。如果被告无正当理由拒不出席调解，法院可能会根据案件情况采取以下措施：

1. 继续推进诉讼程序：对于非必须到庭的被告，法院会正常开庭审理并作出判决。
2. 拘传到庭：对于必须到庭的被告，如果无正当理由拒不出席，法院可以拘传其到庭。

四、关注后续执行

如果调解成功并达成了调解协议，但被告不履行调解协议中的义务，您可以向法院申请强制执行。法院会采取一系列措施来确保调解协议得到履行，包括但不限于冻结账户、查封财产等。

五、保持沟通与耐心

在整个调解过程中，保持与调解组织者和法院的沟通是非常重要的。及时了解案件进展，配合法院的工作，并耐心等待调解结果。同时，也要做好心理准备，因为调解过程可能会因为各种原因而延长。

六、考虑其他纠纷解决方式

如果调解最终无法成功，或者被告始终无法联系上，您还可以考虑通过其他途径来解决纠纷，比如仲裁或诉讼等。这些方式虽然可能更加正式和耗时，但也是解决纠纷的有效手段。

总之，当调解员打给被告的电话不被接听时，您不必过于焦虑。通过主动联系调解组织者、配合法院工作、关注后续执行以及保持沟通与耐心等方式，您可以有效地应对这种情况，并推动纠纷的顺利解决。