网络数据爬虫学习笔记

网络爬虫定义，requests模块应用
#网络爬虫定义
1.网络爬虫入门
网络爬虫：自动抓取互联网信息程序，利用互联网数据进行分析，开发产品。

2.实时获取城市的AQI
网络爬虫步骤：1.通过网络链接获取网页内容
2.对获得的网页内容进行处理

requests模块

• requests模块是一个简单便捷处理HTTP请求的工具。

• 支持非常丰富的链接访问功能，包括URL获取，HTTP会话，Cookies记录。
  -a. 增加Cookies说明。
  link.

requests网页请求

get()：对应HTTP的GET方式
post()：对应HTTP的POST方式,用于传递用户数据

requests对象属性

status_code:HTTP请求的返回状态，200表示连接成功，400表示失败
text：HTTP相应内容的字符串形式，即URL对应的页面内容。

详见链接: [link](https://docs.python-requests.org/s/