互联网爬虫是否违法，不能一概而论，需要分情况讨论：

1. 合法使用爬虫的情况：

   • 遵守robots协议：如果爬虫的使用遵循了目标网站的robots协议（即网站所有者设置的爬虫访问规则），且没有侵犯网站的数据权益或其他合法权益，那么这种使用通常是合法的。robots协议是网站所有者向爬虫发出的指示，告知哪些页面可以抓取，哪些页面禁止抓取。
   • 用于合法研究或数据分析：如果爬虫被用于合法的学术研究、市场调研或数据分析等目的，且数据的使用和传播符合相关法律法规和道德规范，那么这种使用也是合法的。

2. 违法使用爬虫的情况：

   • 违反robots协议：如果爬虫无视目标网站的robots协议，强行抓取禁止访问的页面或数据，这可能构成对网站数据权益的侵犯，是违法的。
   • 数据滥用或侵犯隐私：如果爬虫抓取的数据被用于非法目的，如侵犯他人隐私、进行诈骗或传播虚假信息等，那么这种使用显然是违法的。
   • 造成网站运营障碍：如果爬虫的使用对目标网站造成了过大的访问压力，导致网站无法正常运行或服务中断，这也可能构成违法行为，如破坏计算机信息系统罪等。

法律背景与建议：

• 法律背景：在我国，对于互联网爬虫的使用，主要依据《中华人民共和国网络安全法》、《中华人民共和国数据安全法》以及《中华人民共和国民法典》中关于个人信息保护和数据权益的相关规定进行规范。这些法律法规旨在保护网络信息安全、数据安全和个人隐私，维护网络空间的健康有序发展。
• 法律建议：
  • 在使用爬虫前，务必仔细阅读并遵守目标网站的robots协议，确保自己的抓取行为合法合规。
  • 抓取的数据应仅用于合法目的，不得侵犯他人隐私或进行其他非法活动。
  • 如果爬虫的使用可能对目标网站造成较大访问压力，应提前与网站所有者沟通并获得许可，或采取合理的技术手段减轻访问压力。

可能面临的法律后果：

• 如果爬虫的使用违反了相关法律法规或侵犯了他人的合法权益，使用者可能面临民事赔偿、行政处罚甚至刑事责任等法律后果。具体后果取决于违法行为的性质、情节和后果等因素。

总结与进一步思考：

互联网爬虫本身并不违法，但其使用方式必须合法合规。在使用爬虫时，应充分考虑目标网站的权益、数据的安全性和合法性以及可能对他人造成的影响。如果有任何关于互联网爬虫使用的法律疑问或担忧，可以直接向我咨询，我会根据你的具体情况提供专业的法律建议。