别人借给你钱赌博并写下借条，但不还债时，债主不能找你的家人要债。以下是对此问题的详细分析：

一. 赌博债务的法律性质

1. 非法债务：根据公序良俗及法律规定，赌博是违法行为，因此因赌博而产生的债务也被视为非法债务，不受法律保护。这意味着，如果债主因赌博债务向你或你的家人追债，法律上不会支持其诉求。

二. 借条的法律效力

1. 借条与赌博债务的关联：尽管你写下了借条，但由于该借条是基于赌博行为而产生的，其法律效力受到质疑。在法律上，因非法行为（如赌博）而订立的合同或协议通常被视为无效。
2. 证据问题：即使借条存在，但如果债主试图通过法律途径追讨赌博债务，法院很可能会因债务的非法性而驳回其诉讼请求。同时，你也需要承担因赌博而可能面临的法律责任。

三. 家人的法律责任

1. 独立法律主体：你的家人作为独立的法律主体，与你的赌博债务没有直接的法律关系。他们不需要为你的赌博债务承担任何法律责任。
2. 保护家人权益：如果债主试图找你的家人要债，你的家人有权拒绝，并可以寻求法律援助或报警处理。

综上所述，别人借给你钱赌博并写下借条，但不还债时，债主不能找你的家人要债。因为赌博债务是非法债务，不受法律保护，且你的家人与你的赌博债务没有直接的法律关系。我建议你尽快与债主沟通，明确告知其赌博债务的非法性，并寻求合法途径解决债务问题。同时，也要提醒你，赌博是违法行为，应远离赌博，遵守法律法规。如有进一步需要，您可以继续咨询我。