一、认识爬虫
1.爬虫的概念
2.爬虫的原理
3.爬虫的合法性与robots协议
4.爬虫的合法性与robot.txt协议
二、认识反爬虫
1.网站反爬虫的目的与手段
容易被破解(只要提交的user-agent不带有爬虫这些字眼,就可以获取数据)
2.爬取策略制定
三、配置Python爬虫环境
1.Python爬虫相关库与配置
python爬虫环境与爬虫
最新推荐文章于 2024-08-21 23:42:00 发布