爬虫-利用Cookiejar类对象获取登陆后的cookie信息-人人网旧版的模拟登陆演练

最新推荐文章于 2022-05-13 14:03:56 发布
最新推荐文章于 2022-05-13 14:03:56 发布
阅读量364 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ifubing/article/details/104443153
版权

http.cookiejar模块

在这里插入图片描述

在这里插入图片描述

演练-动态获取cookie然后访问个人中心

目标：构建相关的对象

流程：

  • 创建cookiejar对象
  • 创建cookie处理器对象
  • 创建打开器对象
  • 构建请求头（包含了ua）

在这里插入图片描述

目标：发起请求，登陆网页

流程：

  • 构建请求参数
  • 定义了请求地址
  • 创建了请求对象
  • 打开器发起请求

在这里插入图片描述

目标：访问个人中心

流程：

  • 构建新请求对象
  • 打开器发起请求
  • 保存文件

在这里插入图片描述

》小结

上面的操作，发起了两个请求

请求一，登陆，目的是得到cookie

请求二，访问个人中心，这个才是我们真正的目的

》注意

实际的开发中，登陆不可能是这么简单的事情

本文里主要理解流程即可

鲸鱼编程pyhui
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
爬虫三、cookies---自动登录并发表评论
随风的博客
04-05 484
打开网址: https://wordpress-edu-3autumn.localprod.oc.forchange.cn/wp-login.php 右击打开“检查”工具，点击【network】，勾选【preserve log】（持续显示请求记录，防止请求记录被刷新）。 展开第0个请求【wp-login.php】，浏览一下【headers】。在【General】键里，我们可以先只看前两个参数【Request URL】（请求网址）和【Request Method】（请求方式）。 get请求是明文显示，应用于获
爬虫——cookie模拟登陆
li123128的博客
09-06 745
http协议为无连接协议，cookie: 存放在客户端浏览器，session: 存放在Web服务器 人人网登录案例 方法一：登录网站手动抓取Cookie 1、先登录成功1次，获取到携带登陆信息的Cookie 登录成功 - 个人主页（http://www.renren.com/971989504/profile） - F12抓包 - 刷新个人主页 - 找到主页的包(home) 　　一...
爬虫之——初识cookie
小西瓜的博客
04-25 644
爬虫之——初识cookie 什么是cookie？ 在网站中，http的请求是无状态的。也就是说即使第一次和服务器连接后并登录成功后，发出第二次请求的时候，服务器依然不知道当前请求是哪个用户。cookie的出现就是为了解决这个问题。第一次登录后服务器返回一些数据（cookie）给浏览器，然后浏览器保存在本地，当用户发送第二次请求的时候，就会自动的把上次请求存储的cookie数据自动地携带给服务器，服...
爬虫下载cookie
shengblue的博客
03-20 300
from urllib import request import urllib from http import cookiejar my_cookiejar=cookiejar.LWPCookieJar(filename='baidu.txt') cookie_handler=request.HTTPCookieProcessor(my_cookiejar) opener=request....
python 爬虫(cookie)
sonflower123的博客
05-13 4199
cookie和session区别 cookie数据存放在客户浏览器上，session数据放在服务器上 cookie不是很安全，别人可以分析放在本地的cookie并进行cookie欺骗 session会在一定时间上保存在服务器。当访问增多，会比较占用服务器的性能。 单个cookie保存的数据不能超过4K，很多浏览器限制到一个站点最多保存20个cookie 爬虫处理cookie和session 带上cookie、session的优点: 能够请求到登录后页面 带上cookie、session的弊端:
爬虫直接用cookie
docker做了端口映射却不能访问
12-09 669
感谢(https://www.douban.com/note/264976536/) 1，获取Cookie 很简单，使用Chrome浏览器的”开发者工具(Developer Tools)“或者Firefox的"HTTPFOX"等插件就可以直接查看自己新浪微博的Cookie。（注： 这个私人Cookie千万不要泄露哦！） 比如，Chrome
Python爬虫--人人网模拟登录cookie（四）
HG0724的博客
09-25 607
文章目录模拟登录一、pandas是什么？二、使用步骤1.引入库2.读入数据总结欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 模拟登录 爬取基于某些用户的用户信息 需求： 对人人网
axios-cookiejar-support:添加对cookie的强力cookie支持
04-28
axios-cookiejar-支持 为添加支持。 安装 $ npm i axios tough-cookie axios-cookiejar-support - 或者 - $ npm i axios tough-cookie @3846masa/axios-cookiejar-support # Same as above 打字稿 如果要与...
Python爬虫利用cookie实现模拟登陆实例详解
09-21
在Python爬虫开发中，模拟登录是一项重要的技能，它允许我们获取需要登录后才能访问的网页内容。本文将详细讲解如何利用cookie来实现Python爬虫的模拟登录。 首先，我们需要理解cookie的概念。Cookie是一种在客户端...
学习笔记(12):21天搞定分布式Python网络爬虫-urllib库-Cookie原理讲解
01-20
# 从响应中获取新的Cookie并保存到CookieJar cookie_jar.extract_cookies(response, request) ``` 在分布式爬虫环境中，可能需要在多台机器之间共享Cookie，这时可以考虑将Cookie序列化（如JSON格式）存储在数据库...
人人网登陆页面
05-13
使用web 中的div+css开发的人人网的登陆页面，几乎完全一样
登陆人人网的教程，教您登陆人人网的三种方法，方便灵活
12-10
登陆人人网的教程,本教程是笔者亲手制作，不妥之处还望提出您的宝贵意见和建议，这是一个可执行文件，解压后就可直接打开，决对的绿色
人人网（校内）自动登录
11-19
最近想找个新校内（人人网）的登录程序，网上找啊找啊发现都是老校内的，不能直接用，于是乎自己写了个简易的。用到了几个Libarary已经放在压缩包里了，请自行添加。 说了是简易版，就是没有功能～抛砖引玉吧。 至于登录之后大家干嘛～就是各位自己的事了。 欢迎联系讨论～互相学习哈
node-fetch-cookies:添加对 cookie-jar 支持的节点获取包装器
07-24
节点获取cookies 一个支持 cookie 的包装器。 它支持从/向 JSON cookie jar 读取/写入，并将 cookie 保存在内存中，直到您调用CookieJar.save()以减少磁盘 I/O。 要从 1.2.x 或更低版本升级到 1.3.x 或更高版本，请...
Python 爬虫模拟登陆知乎
09-21
Python 爬虫模拟登陆知乎是一项常见的网络爬虫技术，主要应用于需要用户登录才能访问的网站，例如知乎。本文将详细介绍如何使用Python实现这一过程，包括基本原理、所需工具及具体代码实现。 首先，理解爬虫模拟...
人人网登录（通过cookiejar）
weixin_42958183的博客
08-14 2442
from fengzhuang_all import post,get from urllib import request,parse import json # 保存cookie from http import cookiejar # 通过对象保存cookie cookie_object = cookiejar.CookieJar() # handler 对应着一个操作 handler ...
爬虫之cookie处理
youhebuke225的博客
04-08 3566
一般我们请求的时候，请求头的信息不够就会导致访问不成功 在请求的时候有两个比较重要的信息cookie、referer 两个重要的信息 cookie携带着你的登录信息，如果我们登录之后有cookie，那么在请求的时候应该在请求头上携带cookie的信息 referer一般用来判断当前路径是不是由上一个路径进来的，一般做图片防盗链，他所表示的是上一个页面 例子 我们写一个微博的cookie登录 import urllib.request url = 'https://weibo.cn/645149.
使用cookie登陆人人网
大牛壮壮成长之路
07-23 432
from urllib import request, parse from http import cookiejar filename = 'cookie.txt' class Spider(object): headers = { 'User-Agent': 'Mozilla/4.0 (compatible; MSIE 5.5; Windows NT)' ...
Python模拟登陆并获取cookie
最新发布
05-31
好的，我可以为您提供一些Python模拟登陆并获取cookie的代码示例。请注意，这里的代码仅供参考，具体的登陆方式和获取cookie的方式可能因网站而异。 ```python import requests # 创建一个 session 对象 session =...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

鲸鱼编程pyhui

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值