爬取公开个人信息是否犯罪，需结合具体手段和目的来判断，不能一概而论。以下从不同角度进行分析：
一、合法爬取的情形
遵守Robots协议：
- 每家网站都设定了哪些数据、哪些页面能被抓取，哪些不能被抓取的协议文件，即国际互联网界通行的Robots协议。如果爬虫程序遵守该协议，在允许的范围内爬取数据，那么这种行为通常是合法的。
获取合法授权：
- 如果爬虫程序的使用者已经获得了数据提供者的合法授权，比如签订了《数据合作授权协议》，那么在这种授权范围内爬取数据也是合法的。
二、非法爬取的情形及法律后果
突破防护措施：
- 如果爬虫程序绕过验证码、破解加密接口，或者伪造设备ID绕过IP封锁等防护措施来爬取数据，可能构成非法获取计算机信息系统数据罪。根据相关法律规定，违法所得5万元以上即可判刑。
抓取个人信息：
- 非法获取手机号、身份证号等敏感信息，或者收集超过一定数量的普通信息（如5000条）或敏感信息（如500条），即可能触犯刑法。即便数据已公开（如企业公示信息），批量采集仍可能违法，因为这可能侵犯了个人信息权益。
危害国家安全：
- 如果爬虫程序抓取了地图坐标、基础设施数据，或者采集了重点人员信息（如军警、科研人员），可能构成间谍罪等严重犯罪，最高可判死刑。
干扰系统运行：
- 高频访问导致服务器瘫痪（如每日访问次数超过5万次），或者造成经济损失（如10万元以上），也可能构成犯罪。
三、法律后果
民事责任：
- 非法爬取数据可能需要赔偿被爬企业的直接损失，包括修复系统费用等。
行政处罚：
- 非法爬取数据可能面临最高100万元的罚款；拒不整改的，可能吊销营业执照；关键信息基础设施运营方可能面临更高额的罚款，如最高罚款年营业额的5%。
刑事风险：
- 非法获取计算机信息系统数据罪：可处3-7年有期徒刑；
- 侵犯公民个人信息罪：最高可处7年有期徒刑；
- 破坏计算机信息系统罪：最高可处15年有期徒刑。
四、合规建议
遵守Robots协议：在爬取数据前，应仔细阅读并遵守目标网站的Robots协议。
获取合法授权：如果需要爬取特定网站的数据，应尽可能获得数据提供者的合法授权。
数据脱敏处理：在爬取和存储数据时，应对敏感信息进行脱敏处理，如删除身份证后四位、对手机号中间四位加密等。
案例参考：
- 上海市浦东新区检察院提起公诉的一起案件中，被告人通过爬虫技术非法获取公民个人信息共计308万余条，并通过有偿提供查询服务违法所得共计1750余万元。最终，法院以侵犯公民个人信息罪判处被告人有期徒刑三年，缓刑三年至有期徒刑一年，缓刑一年不等，并各处罚金。
作为专业律师，我建议在使用爬虫技术时务必谨慎，确保遵守相关法律法规和道德规范。如果有任何法律问题或疑虑，可以直接向我咨询。