结论：仅凭朋友退个人所得税时打电话要你的家庭住址这一行为，不能直接判定为诈骗，但确实存在一定风险，需要谨慎对待。下面我从几个角度为你详细分析：

税务申报与信息提供的一般原则

在个人所得税的申报和退税流程中，税务机关通常需要纳税人提供准确的信息以完成税务处理。然而，税务机关一般不会直接通过电话要求纳税人提供第三方（如你的朋友）的家庭住址等敏感信息，除非是在特定的调查或核实程序中，且会明确告知信息使用的目的和范围。因此，如果朋友声称是税务机关要求提供你的家庭住址，这本身就存在疑点。

诈骗行为的常见特征

诈骗行为往往伴随着虚假身份伪装、紧急情况制造、信息索取等特征。在这个场景中，如果对方：

1. 伪装成税务机关工作人员：通过电话声称是税务局，要求提供个人信息，这是典型的诈骗手段。
2. 制造紧急情况：如声称退税需要立即提供信息，否则将失去退税资格，以此迫使你或你的朋友迅速做出决定。
3. 索取敏感信息：家庭住址属于个人敏感信息，一旦泄露可能被用于不法目的，如身份盗窃、诈骗等。

如果朋友的电话中存在上述特征，那么这很可能是一起诈骗行为。

应对建议

1. 核实身份：首先，建议你或你的朋友通过官方渠道（如税务局官网、官方客服电话）核实对方身份，确认是否为税务机关工作人员。
2. 不轻易提供信息：在未确认对方身份和目的之前，不要轻易提供个人敏感信息，包括家庭住址、身份证号码、银行账户等。
3. 报警处理：如果确认是诈骗行为，应立即向当地公安机关报案，并提供相关证据（如通话记录、短信内容等），以便警方及时介入调查。

法律后果与风险提示

• 如果信息被泄露：一旦你的家庭住址等敏感信息被不法分子获取，可能会面临身份盗窃、诈骗等风险，给你带来不必要的麻烦和损失。
• 法律责任：如果朋友在不知情的情况下参与了诈骗行为（如提供了你的信息），虽然可能不承担直接的法律责任，但也可能因疏忽大意而面临一定的道德和法律风险。因此，建议朋友在处理此类事情时保持谨慎和警惕。

总结：在面对类似情况时，务必保持冷静和警惕，通过官方渠道核实对方身份和目的，不轻易提供个人敏感信息。如果有任何疑问或不确定之处，可以直接向我咨询，我会为你提供专业的法律建议和帮助。