爬虫剑谱第二页（网课笔记）

爬虫究竟合法还是违法？

在法律中是不被禁止的

具有违法的风险

爬虫带来的风险分为以下两个方面:

1. 爬虫干扰了被访问网址的正常运营
2. 爬虫抓取了收到法律保护的特定数据或者流量

 

如何在使用编写爬虫的过程中避免进入“局子”的情况？

1. 时常优化自己的程序，避免干扰被访问网站的正常运行
2. 在使用时，传播爬取到的数据时，审查爬取的内容，如果发现了商业机密等敏感内容需要及时停止爬取或传播