requests库入门-3-urllib和requests小程序

       在介绍使用requests之前，不得不介绍python种自带的urllib这个库，如果你安装的是python2.7.x，那么你可能发现了，还有一个urllib2。甚至，你可能还知道有一个urllib3.urllib是python最早就自带的，相当于原生的处理url相关的事件。后来由于需要，开发了urllib2，两种的关系是互相独立的模块，在实际使用过程，可能会两者结合使用。在python3中，可能你发现只有一个urllib，原来在python3中，把urllib和urllib2合并成urllib，二urllib3是一个第三方的类库，我们这个系列核心requests是基于urllib3开发的。urllib3的特点就是多次请求重复使用一个socket。

1.先来看看urllib如何发送和处理一个http请求

我们在Pycharm里面新建一个项目，然后在下项目下新建一个包，在包下新建一个urllib_test.py，输入如下内容

import urllib.request

#请求百度网页
re = urllib.request.urlopen('http://www.baidu.com', data = None, timeout = 10)
print(re.info())

注意和我一样的格式，不然会报错，这里data我们不给具体参数，默认就是打开百度首页，不进行搜索。

输出效果

Date: Wed, 23 Aug 2017 14:35:31 GMT
Content-Type: text/html; charset=utf-8
Transfer-Encoding: chunked
Connection: Close
Vary: Accept-Encoding
Set-Cookie: BAIDUID=0CDA8A8DD7E10E75FDB40F4186F88A6E:FG=1; expires=Thu, 31-Dec-37 23:55:55 GMT; max-age=2147483647; path=/; domain=.baidu.com
Set-Cookie: BIDUPSID=0CDA8A8DD7E10E75FDB40F4186F88A6E; expires=Thu, 31-Dec-37 23:55:55 GMT; max-age=2147483647; path=/; domain=.baidu.com
Set-Cookie: PSTM=1503498931; expires=Thu, 31-Dec-37 23:55:55 GMT; max-age=2147483647; path=/; domain=.baidu.com
Set-Cookie: BDRCVFR[ZQuaEB4a2uC]=aeXf-1x8UdYcs; path=/; domain=.baidu.com
Set-Cookie: BDSVRTM=11; path=/
Set-Cookie: BD_HOME=0; path=/
Set-Cookie: H_PS_PSSID=1441_21081; path=/; domain=.baidu.com
P3P: CP=" OTI DSP COR IVA OUR IND COM "
P3P: CP=" OTI DSP COR IVA OUR IND COM "
Cache-Control: private
Cxy_all: 28035039_3_pg+5955467e4d4571025b427b7e55276001
Expires: Wed, 23 Aug 2017 14:35:31 GMT
X-Powered-By: HPHP
Server: BWS/1.1
X-UA-Compatible: IE=Edge,chrome=1
BDPAGETYPE: 1
BDQID: 0xf7436788000d3815
BDUSERID: 0

从上面输出效果，我们可以看到响应的Heads内容，这个你可以参考前面文章中浏览器的中观察Heads对比。

2.用Requests发送百度请求

新建一个requests_test.py文件，输入如下内容。

import requests

#请求百度网页
response = requests.get("https://www.baidu.com", data=None,timeout=10)
print(response.headers)

打印内容如下

{'Cache-Control': 'private, no-cache, no-store, proxy-revalidate, no-transform', 
'Connection': 'Keep-Alive', 
'Content-Encoding': 'gzip',
 'Content-Type': 'text/html', 
'Date': 'Wed, 23 Aug 2017 14:51:05 GMT',
 'Last-Modified': 'Mon, 23 Jan 2017 13:23:51 GMT', 
'Pragma': 'no-cache', 
'Server': 'bfe/1.0.8.18', 
'Set-Cookie': 'BDORZ=27315; max-age=86400; domain=.baidu.com; path=/',
 'Transfer-Encoding': 'chunked'
}

       本篇，我们只介绍了urllibe如何发送一个http请求和打印响应Headers，以及用requests来处理相同一个问题。从代码行数，目前暂时看不出那个方法更优秀。接下来，我们会介绍requests处理GET和POST请求。