这种行为可能涉及违法，具体处理方式需根据实际情况判断，以下是详细分析：
- 关于借手机本身：如果只是单纯借了别人手机，这通常属于民事上的借用关系。出借人有权要求借用人在合理期限内归还手机。如果借用人不归还，出借人可以通过协商、调解或者向法院起诉等合法途径来维护自己的权益，要求返还手机。
- 关于找对方家里人要钱：
- 若以归还手机为条件索要钱财：这种行为可能涉嫌敲诈勒索。敲诈勒索是指以非法占有为目的，对被害人使用实施恐吓、威胁或要挟的方法，非法占用被害人公私财物，从而构成犯罪。在这种情况下，对方家里人可以选择报警，警方会依法进行调查处理。如果构成敲诈勒索罪，根据犯罪情节的严重程度，可能会面临有期徒刑、拘役或者管制，并处或者单处罚金的刑罚。
- 若以其他理由索要钱财：比如声称手机有损坏要求赔偿，但实际并无合理依据，这也可能构成欺诈。欺诈行为如果数额较大，也可能涉及刑事犯罪；即使不构成犯罪，对方也有权拒绝支付不合理费用，并可以通过法律途径解决纠纷。
建议：
- 如果你是出借人，遇到这种情况，不要轻易向对方家里人支付钱财。可以先尝试与借用人沟通，要求其归还手机或者通过合法途径解决手机损坏赔偿等问题。如果沟通无果，可以向警方报案或者向法院起诉。
- 如果你是借用人，不要采取这种不合法的方式索要钱财。如果手机有损坏需要赔偿，应该与出借人协商确定合理的赔偿金额，并通过合法途径支付。
温馨提示：在日常生活中，我们要遵守法律法规，通过合法途径解决纠纷。如果遇到法律问题，可以直接向我咨询，我会为你提供专业的法律建议。