request和bs4

requests的用法

request是python用于网络（http）请求的第三方库，也是爬虫获取网络数据的

重要工具

1.向目标地址（网络地址）发送请求

request.get(url,*,headers,proxies,timeout) - 以指定的方式给地址发送网络请求，返回值是服务器的响应对象

参数说明：

url ：字符串；请求的网络地址，可能是目标的网络的地址，也可能是数据接口

headers：字典；请求头，用于伪装浏览器设置user-agent、完成自动登录设置cookie

proxies：字典；请求头，用于伪装浏览器设置user-agent、完成自动登录设置

cookie

timeout：数字；设置超时时间

url = 'https://search.51job.com/list/000000,000000,0000,00,9,99,数据分析,2,1.html?lang=c&postchannel=0000&workyear=99&cotype=99&degreefrom=99&jobterm=99&companysize=99&ord_field=0&dibiaoid=0&line=&welfare='
response = requests.get(url, headers=headers)

2.获取相应头