使用cookiejar模拟登录微博,获取登录后的页面数据

一、导入模块

import urllib.request
import http.cookiejar
import urllib.parse
import ssl

ssl._create_default_https_context = ssl._create_unverified_context

二、依次创建cookiejar对象、handler对象、opener对象

cookie = http.cookiejar.CookieJar()
handler = urllib.request.HTTPCookieProcessor(cookie)
opener = urllib.request.build_opener(handler)

三、模拟登录数据

  • 获取登录表单的提交地址
post_url = 'https://passport.weibo.cn/sso/login'
  • 查看表单提交字段,设计模拟数据
data = {
    'username':'18570329382',
    'password':'1126482',
    'savestate':'1',
    'r':'http://weibo.cn/',
    'ec':'0',
    'pagerefer':'',
    'entry':'mweibo',
    'wentry':'' ,
    'loginfrom':'',
    'client_id':'',
    'code':'',
    'qq':'',
    'mainpageflag':'1',
    'vid':'fef0ad08eb4bf0b3e04a026f8778705614f877870561',
    'hff':'',
    'hfp':'',
}
data = urllib.parse.urlencode(data).encode('utf-8')
  • 构造headers
headers = {
    'Host': 'passport.weibo.cn',
    'Connection':'keep-alive',
    'Content-Length':'219',
    'Origin':'https://passport.weibo.cn',
    'User-Agent':'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_1) AppleWebKit/537.36 (KHTML like Gecko) Chrome/63.0.3239.84 Safari/537.36',
    'Content-Type': 'application/x-www-form-urlencoded',
    'Accept':'*/*',
    'Referer':'https://passport.weibo.cn/signin/login?entry=mweibo&r=http%3A%2F%2Fweibo.cn%2F&backTitle=%CE%A2%B2%A9&vt=',
    'Accept-Encoding':'gzip, deflate, br',
    'Accept-Language':'zh-CN,zh;q=0.9',
    }

四、模拟请求

request = urllib.request.Request(url=post_url,data=data,headers=headers)

五、发送请求进行登录

response = opener.open(request)

六、用opener对象访问登录后的详情页(opner对象自动保存了登录后的cookies)

url = 'https://weibo.cn/5613030371/info'
headers1 = {
    'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_1) AppleWebKit/537.36 (KHTML like Gecko) Chrome/63.0.3239.84 Safari/537.36',

}
request = urllib.request.Request(url=url,headers=headers1)

response1 = opener.open(request)
print(response1.read())
  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值