结论：针对您描述的情况，您可以采取以下措施来追回欠款并保护自己及家人的安全：首先，明确欠款事实并收集证据；其次，尝试与对方协商解决；若协商无果，可向法院提起诉讼；同时，若对方存在威胁行为，应及时报警处理。
详细解答：
明确欠款事实并收集证据：
- 您需要确保自己手中握有能够证明对方确实欠您钱的证据，如借条、转账记录、聊天记录等。这些证据是后续追讨欠款的关键。
- 如果可能的话，尽量让对方承认欠款事实，并留下书面或录音证据，以备不时之需。
尝试与对方协商解决：
- 在采取法律手段之前，您可以先尝试与对方进行协商，看是否能够达成还款协议。
- 协商时，您可以明确提出还款期限、方式等具体要求，并尽量以书面形式记录下来，以便后续执行。
向法院提起诉讼：
- 如果协商无果，您可以向法院提起诉讼，要求对方归还欠款。
- 在提起诉讼前，您需要准备好相关证据材料，并撰写好起诉状。起诉状中应明确列出您的诉讼请求、事实和理由等。
- 法院受理案件后，会依法进行审理，并作出判决。如果判决对方归还欠款，而对方仍不履行，您可以向法院申请强制执行。
对方威胁行为的处理：
- 如果对方存在威胁您或您家人的行为，您应及时报警处理。
- 报警时，您需要向警方详细描述对方的威胁行为、时间、地点等信息，并提供相关证据（如录音、聊天记录等）。
- 警方会根据情况对对方进行警告、处罚或采取其他必要措施，以保护您及家人的安全。
额外建议：
- 在整个过程中，您应保持冷静和理智，不要与对方发生不必要的冲突或争执。
- 如果您对法律程序不熟悉或感到困惑，可以寻求专业法律人士的帮助，比如向我咨询，我会根据您的具体情况提供更详细的法律建议和指导。
- 同时，您也可以考虑向亲朋好友或相关机构寻求支持和帮助，以共同应对这一困境。
法律后果提示：
- 如果对方被法院判决归还欠款而仍不履行，可能会面临被强制执行、列入失信被执行人名单等法律后果。
- 如果对方存在威胁行为且情节严重，可能会构成犯罪行为，如寻衅滋事罪、敲诈勒索罪等，将受到法律的严厉制裁。