python urllib3用法_python – urllib3使用指定的用户代理下载文件

在urllib3中更新用户代理信息的正确方法是什么？

如何检查用户代理信息是否确实已更改并正在使用？

例如：

user_agent = {'user-agent': 'Mozilla/5.0 (Windows NT 6.3; rv:36.0) Gecko/20100101 Firefox/36.0'}

http = urllib3.PoolManager(10, headers=user_agent)

r1 = http.request('GET', 'http://example.com/')

if r1.status is 200:

with open('somefile','w+') as f:

f.write(r1.data)

当我在http创建一个PoolManager时,我用dir(http)查看它,看到http.headers默认为空并更新为指定的用户代理信息,但它是否被使用？无论如何都要检查而不必查看apache日志？

并在尝试更新用户代理后实际检查/var/log/apache2/access.log：

>>> import urllib3

>>> user_agent = {'user-agent': 'Mozilla/5.0 (Windows NT 6.3; rv:36.0) Gecko/20100101 Firefox/36.0'}

>>> http = urllib3.PoolManager(2, headers=user_agent)

>>> r = http.request('GET','localhost')

>>> with open('/var/log/apache2/access.log','r') as f:

... last_line = f.readlines()[-1]

...

>>> last_line

'127.0.0.1 - - [08/Dec/2014:20:42:04 -0500] "GET / HTTP/1.1" 200 461 "-" "-"\n'