http.cookiejar模块
- urlopen() 既可发送 GET 请求,也可发送 POST、PUT、DELETE、PATCH 等请求
- 大部分时候,urllib.request 模块可代替 http.client 模块
应用场景
- 访问Web应用中被保护的资源
- 维护与服务器之间的 session,借助于 cookie 管理器来实现
通过cookie管理session
- 创建
http.cookiejar.CookieJar
对象或其子类的对象,负责处理cookie - 以
CookieJar
对象为参数,创建urllib.request.HTTPCookieProcessor
对象,该对象负责调用CookieJar
来管理 cookie - 以 HTTPCookieProcessor 对象为参数,调用
urllib.request.build_opener()
函数创建OpenerDirector
对象 - 使用
OpenerDirector
对象来发送请求,该对象将会通过HTTPCookieProcessor
调用CookieJar
来管理 cookie
流程
Cookiejar -> HTTPCookieProcessor -> urllib.request.build_opener() -> OpenerDirector
示例代码
from urllib.request import *
import http.cookiejar
import urllib.parse
# 以指定的文件创建Cookiejar对象,对象将可以把cookie保存在文件中
cookie_jar = http.cookiejar.MozillaCookieJar('a.txt')
# 若a.txt已存在用户信息 ,则直接加载a.txt中的Cookie信息
# cookie_jar.load('a.txt',ignore_discard=True,ignore_expires=True)
# 创建HTTPCookieProcessor对象
cookie_processor = HTTPCookieProcessor(cookie_jar)
# 创建OpenerDirector类对象实例
opener = build_opener(cookie_processor)
# 定义模拟火狐,chrome浏览器的user_agent
user_agent = r'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36' \
r' (KHTML, like Gecko) Chrome/56.0.2924.87 Safari/537.36'
# 定义请求头
headers = {'User-Agent': user_agent, 'Connection': 'keep-alive'}
# 定义登录
params = {'name': 'crazyit.org', 'pass': 'leegang'}
postdata = urllib.parse.urlencode(params).encode()
# post登录
request = Request('http://localhost:8888/test/login.jsp',
data=postdata, headers=headers)
# 使用OpenDirector发送post请求
response = opener.open(request)
print(response.read().decode('utf-8'))
# 底层cookiejar将cookie信息写入磁盘
cookie_jar.save(ignore_discard=True, ignore_expires=True)
# 请求保护资源
request = Request('http://localhost:8888/test/secret.jsp',
headers=headers)
# 携带cookie信息访问受保护的资源
response = opener.open(request)
print(response.read().decode())