爬虫
BuKaiXIu
我把青春赌明天
展开
-
爬虫概念、工具和 HTTP
爬虫概念、工具和 HTTP1. 爬虫是什么2. 爬虫的数据3. 需要的软件和环境4. 浏览器的请求5. 认识 HTTP、HTTPS 1. 爬虫是什么 爬虫:模拟客户端(浏览器)发送网络请求,获取响应,按照规则提取数据的程序 模拟客户端(浏览器)发送网络请求:照着浏览器发送一模一样的请求,获取和浏览器一模一样的数据 2. 爬虫的数据 呈现出来:展示在网页上或者展示在app上 进行分析:从数据中...原创 2019-02-20 17:35:51 · 324 阅读 · 0 评论 -
Requests Module Learning
目录1. 准备2. 发送GET、POST请求,获取响应3. response的方法4. 获取网页源码的正确方法(通过下面三种方式一定能获取到网页的正确解码后的字符串)header 的使用 1. 准备 安装 Requests pip install requests 2. 发送GET、POST请求,获取响应 requests.get(url): 发送get请求,请求url地址对应的响应 ...原创 2019-02-20 21:30:13 · 391 阅读 · 0 评论