面对因赌债而有人到家里来的情况，你首先要明确的是，赌债在中国是不受法律保护的，因此你完全有权拒绝偿还，并且应该依法采取一系列措施来保护自己及家人的合法权益。以下是一些具体且详细的应对建议：

1. 坚定表明赌债的非法性：

   • 当对方来到家里时，你要冷静且坚定地告知他们，赌债是违法的，不受法律保护。你可以引用相关法律规定，说明赌博是违法活动，因此基于赌博产生的债务关系也不具有合法性，债权人不能通过合法途径来主张权利。

2. 保持冷静，避免激化矛盾：

   • 在与对方交流时，务必保持冷静和理性，不要恐慌或激动。使用平和的语言来表达你的立场，避免使用刺激性言辞，以免激怒对方，从而确保自身和家人的人身安全。

3. 明确拒绝偿还赌债：

   • 不要有任何犹豫或含糊，明确告诉对方你不会偿还赌债，因为这是非法的。如果对方坚持要求偿还，你可以再次强调这是违法行为，并且你已经咨询了律师或相关机构，了解了自己的法律权益。

4. 及时报警处理：

   • 如果对方存在暴力威胁、骚扰等违法行为，如言语恐吓、限制人身自由、打砸家中物品等，你应立即拨打110报警电话。警方会依法介入处理，维护你的正常生活秩序，并对违法者进行相应处罚。

5. 收集并保留相关证据：

   • 在对方来家里骚扰或威胁时，尽量使用手机等设备记录下整个过程，包括对方的言行、人数、时间、地点等具体细节。这些证据在未来的法律程序中可能起到至关重要的作用，有助于你维护自己的合法权益。

6. 寻求家人和社区的支持：

   • 及时告知家人相关情况，让他们了解你的处境，并共同面对问题。同时，你也可以向社区工作人员、居委会或村委会反映情况，寻求他们的协调和帮助，形成更广泛的支持网络。

7. 考虑寻求专业法律援助：

   • 如果你感到无法自行处理这个问题，或者担心自己的法律权益受到进一步侵害，你可以咨询专业的律师或法律援助机构。他们可以为你提供更具体的建议和指导，帮助你更好地维护自己的合法权益。

最后，我要强调的是，远离赌博是预防这类问题的根本之道。赌博不仅违法，而且极易导致家庭破裂、财产损失等严重后果。因此，我建议你和你的家人都要坚决抵制赌博行为，共同维护一个和谐、稳定的家庭环境。