结论：一般情况下，您不能直接去找对方家人要求偿还这50万债务，但在特定情形下，可能存在例外。以下为您详细分析：
一般情况：债务具有相对性，家人无偿还义务
从法律层面来讲，民间借贷关系中的债务具有相对性。这意味着，借款合同（借条等凭证）是您和借款人之间达成的协议，仅对双方具有法律约束力。借款人的家人并非借款合同的当事人，没有基于该合同向您偿还债务的法定义务。
例如，小张向您借了50万元，并出具了借条。后来小张患上重大疾病无力偿还，小张的父母、配偶等家人并没有法律上的责任来替小张还这笔钱。因为借款行为是小张个人作出的，其家人并未参与借款过程，也没有享受这笔借款带来的利益。
特殊情况：存在法定情形时，可向相关人员主张权利
- 债务属于夫妻共同债务
- 法律解释：如果这笔借款发生在借款人与其配偶婚姻关系存续期间，并且用于夫妻共同生活、共同生产经营或者基于夫妻双方共同意思表示，那么这笔债务就属于夫妻共同债务。在这种情况下，您有权向借款人的配偶主张偿还债务。
- 举例说明：小李和小王是夫妻，在小李和小王婚姻关系存续期间，小李向您借了50万元用于家庭装修（家庭装修属于夫妻共同生活范畴）。后来小李患上重大疾病无力偿还，您就可以要求小王偿还这50万元债务。
- 借款人死亡，继承人继承遗产
- 法律解释：如果借款人因重大疾病不幸去世，并且留下了遗产，同时有继承人继承了这些遗产。根据法律规定，继承人在继承遗产的范围内，有义务偿还被继承人生前所欠的合法债务。
- 计算公式及示例：假设借款人去世后留下的遗产价值为80万元，其继承人继承了这80万元遗产。而借款人欠您的债务是50万元，那么继承人就需要在这80万元的范围内偿还您这50万元债务。如果遗产价值只有30万元，继承人则只需在30万元的范围内偿还债务，对于剩余的20万元债务，您可能无法从继承人处获得清偿。
法律建议
- 收集证据：如果您认为存在上述特殊情况，比如债务属于夫妻共同债务或者借款人死亡有继承人继承遗产，您需要收集相关证据来支持自己的主张。例如，证明债务用于夫妻共同生活的消费凭证、借款人的死亡证明、遗产清单、继承人的相关信息等。
- 协商解决：在采取法律行动之前，您可以先尝试与对方家人进行协商，看是否能够达成一个还款协议。协商解决可以节省时间和成本，并且有助于维护双方的关系。
- 提起诉讼：如果协商无果，您可以向法院提起诉讼，通过法律途径来维护自己的合法权益。在诉讼过程中，您需要向法院提交充分的证据，以证明您的主张。
如果您在处理这个问题过程中遇到任何疑问或者需要进一步的法律帮助，可以直接向我咨询，我会为您提供专业的法律意见。