Python爬虫——使用Cookie

Python爬虫——使用Cookie

本文使用的版本为Python3,使用的IDE为Pycharm
  • 示例代码如下:
# 使用Cookie Demo

# 导入模块
from urllib import request, parse, error
from http import cookiejar

# 此处为某网站登陆URL
url1 = ""
# 填充数据
postdata = parse.urlencode({
    "username":"",
    "password":""
}).encode("utf-8")
req = request.Request(url1, postdata)
# 伪装成浏览器
req.add_header("User-Agent", "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/67.0.3396.99 Safari/537.36")
# 创建CookieJar
cjar = cookiejar.CookieJar()
opener = request.build_opener(request.HTTPCookieProcessor(cjar))
request.install_opener(opener)
try:
    data = request.urlopen(req).read()
    fhandle = open("D:\\upackage1.html", "wb")
    fhandle.write(data)
    fhandle.close()
except error.HTTPError as e:
    print("url1: " + str(e.code))
    print("url1: " + str(e.reason))

# 此处为上述网站登陆后URL
url2 = ""
try:
    request.urlretrieve(url2, filename="D:\\upackage2.html")
except error.HTTPError as e:
    print("url2: " + str(e.code))
    print("url2: " + str(e.reason))
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值