面对被人一直骚扰且对方知道您的家庭地址的情况，您首先需要明确的是，这种行为可能构成对您隐私权、安宁权的侵犯，甚至可能涉及治安管理或刑事犯罪。以下是从多个角度为您提供的分析和建议：

一、法律定性

1. 隐私权侵犯：根据《中华人民共和国民法典》的相关规定，自然人享有隐私权，任何组织或者个人不得以刺探、侵扰、泄露、公开等方式侵害他人的隐私权。骚扰者知道并可能利用您的家庭地址进行骚扰，显然侵犯了您的隐私权。

2. 治安管理处罚：如果骚扰行为频繁发生，且对您或您的家庭成员造成了实质性的困扰或威胁，该行为可能违反《中华人民共和国治安管理处罚法》中关于“多次发送淫秽、侮辱、恐吓或者其他信息，干扰他人正常生活”的规定，骚扰者可能面临警告、罚款或拘留等处罚。

3. 刑事犯罪：在极端情况下，如果骚扰行为升级为威胁、恐吓、跟踪、偷窥等更严重的行为，且情节恶劣，可能构成《中华人民共和国刑法》中的寻衅滋事罪、非法侵入住宅罪或侮辱罪等，骚扰者将面临更严厉的刑事处罚。

二、应对措施

1. 收集证据：

   • 保留所有骚扰信息，包括短信、电话记录、邮件、社交媒体消息等。
   • 如果可能，记录骚扰发生的时间、地点、方式以及骚扰者的身份信息（如已知）。
   • 如果有目击者，尽量获取他们的联系方式和证言。

2. 报警处理：

   • 立即向当地公安机关报案，详细陈述骚扰情况，并提交收集到的证据。
   • 公安机关将根据情况展开调查，并根据调查结果采取相应的法律措施。

3. 寻求法律援助：

   • 如果骚扰行为持续不断，且对您造成了严重的心理或生活困扰，您可以考虑咨询专业律师（即向我咨询），了解进一步的法律救济途径。
   • 律师可以帮助您分析案情，制定应对策略，并在必要时代表您向法院提起民事诉讼，要求骚扰者停止侵害、赔礼道歉并赔偿损失。

4. 加强自我保护：

   • 考虑更换家庭住址或加强家庭安全措施，如安装监控摄像头、加强门窗防护等。
   • 避免在公开场合透露过多个人信息，特别是家庭住址等敏感信息。

三、后续行动建议

• 保持冷静：面对骚扰，保持冷静和理智至关重要。不要因情绪激动而采取过激行为，以免给自己带来不必要的麻烦。
• 持续关注：即使报警后，也应持续关注骚扰情况是否得到改善。如果骚扰行为继续发生或升级，应及时向公安机关更新情况。
• 心理支持：长期受到骚扰可能会对您的心理健康造成影响。考虑寻求心理咨询或支持，以帮助您应对这一挑战。

面对骚扰，您有权保护自己的隐私和安宁。请勇敢站出来，采取必要的法律措施来维护自己的合法权益。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。