使用requests库模拟登录豆瓣网并获取个人信息

最新推荐文章于 2025-03-24 16:27:30 发布

「已注销」

最新推荐文章于 2025-03-24 16:27:30 发布

阅读量4.6k

点赞数 2

本文链接：https://blog.csdn.net/topleeyap/article/details/79117842

版权

本文介绍了如何使用requests库分析登录豆瓣所需的POST数据，包括处理验证码的情况。通过Chrome调试工具观察登录失败后的请求，确定了登录字段如form_email、form_password和验证码字段的获取方式。在网页源代码中找到验证码信息，为模拟登录做准备。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

分析

首先分析登录时需要post哪些数据到服务器。
登录界面如图所示，验证码并不是一开始就需要输入的，而是尝试登录失败几次后才出现。所以，需要在代码中判断是否
需要输入验证码。
这里写图片描述

打开Chrome调试工具，使用错误的密码登录一次，可以看到以下信息:

source:None
redir:https://www.douban.com/people/88152161/
form_email:809021823@qq.com
form_password:jjadfafadsfasf
captcha-solution:ornament
captcha-id:6HwbXdVMPJXK7NY6ZFCmdFb1:en
login:登录

其中，
source，redir，login三个字段是固定的，不需要处理，直接使用即可；
form_email，form_password分别是用户账户和密码，直接输入即可；
captcha-solution，captcha-id是验证码信息，需要从网页中获取。

接下来需要分析验证码信息从哪里来获取。
查看登录页面网页源代码，可以看到如下信息

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

「已注销」

关注关注

2
点赞
踩
6

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

requests模拟登录豆瓣

Stealth_pain的博客

02-06

2211

首先打开豆瓣官网，并打开 chrome 的开发者工具，选中 network 选项卡，然后选中 preserve log 选项，这样在跳转页面的时候就不会刷掉之前的请求。不然登录之后处理登录的请求就会被刷新掉从而无法获取。当然，这里也有一个更方便的方法，就是在输入密码的时候输错一位(当然，全部输错也可以)，然后发现一个 basic 请求，打开这个请求的详细信息，发现这是一个 POST 请求，也就是处...

pythonrequests爬取知乎个人信息_【python爬虫01】使用requests库模拟登录知乎-Go语言中文社区...

weixin_39779530的博客

01-29

210

最近入坑python爬虫…简单记录一下我的爬虫经历。一开始是因为经常在知乎上看到各种关于爬虫的资料，于是自己也想尝试一下，既然这个念头是在知乎上产生的，那么我的爬虫之旅就从爬取知乎开始吧。：)要开始写爬虫首先需要掌握以下几点：①网站的请求，响应等基本知识。②学会分析网站，各种抓包工具的使用，方便我们分析网站的交互。由于我们是要登录知乎，自然需要知道请求的参数以及该向哪个url发送请求，...

参与评论您还未登录，请先登录后发表或查看评论

pythonrequests爬取知乎个人信息_用PYTHON中的requests模块爬知乎用户信息

weixin_39887748的博客

12-08

467

最近在自学python爬虫，就会那么几个常用的库的基本动作，拿来爬知乎试一下效果，发现还能爬下来点数据，当然，只是娱乐级别。首先想了一下爬用户的思路。先选一个优质用户，从他的粉丝列表或者关注的人列表中获取用户，鉴于有很多像我这样并没有粉丝的账号，因此选择从关注的人列表中下手。从这位大号关注的人列表中获取每一位用户，再查找每位用户关注的人。。。以此类推。老子曰“道生一，一生二，二生三，三生万物”？ ...

python 模拟登录

热门推荐

小样的博客

08-31

6万+

初次接触爬虫的时候，总会看到模拟登录网站的字眼，然后又是get、post等一堆不知道什么意思的字眼。百度get、post之后也不太清楚什么意思，只知道好像是打开网址的时候顺便提交一些数据。然后又在想：我怎么知道哪些网址需要post，又要post什么数据？哪些网址又是需要get的？后来慢慢接触的多了就知道了，get方式其实没什么，看网址就知道了，比如百度搜索关键词：‘get’，那么只需要http

python使用request中session登录post方式页面进入豆瓣

weixin_55579895的博客

09-18

1021

对于豆瓣这个登录必须有验证的网址， post和get没有关联性，按照不同的需求使用不同的连接方式，可以先自己手动登录到豆瓣，然后拷贝登录后的cookie到代码里，爬虫程序就会以登录后的状态抓数据了 import requests from user_agent import headers def douban_login(): login_url = 'https://accounts.douban.com/j/mobile/login/basic' url = 'https://www

使用Python的Requests库和Beautiful Soup库来爬取豆瓣电影Top250的数据

04-09

在实际操作中，可能会遇到反爬策略，如验证码、IP限制等，此时可能需要使用代理、设置User-Agent、模拟登录等方式来应对。同时，了解并使用如Selenium、Scrapy等更高级的爬虫框架，可以帮助我们处理更复杂的情况。 ...

python爬虫豆瓣网的模拟登录实现

09-18

本文将详细介绍如何使用Python实现对豆瓣网的模拟登录。首先，要模拟登录豆瓣网，我们需要了解登录过程的关键点。第一步是找到真实的POST地址，这通常在网页的HTML源代码中，可以通过浏览器的开发者工具（例如...

Python程序设计：使用requests库下载页面.pptx

06-13

以下载豆瓣电影Top250首页为例，我们可以创建一个名为`douban.py`的Python脚本，使用`requests.get()`方法发送GET请求，获取网页内容。然后可以结合`beautifulsoup`或`lxml`解析并提取所需信息。 **爬虫编写的基本...

详解python 模拟豆瓣登录（豆瓣6.0）

09-19

### 详解Python模拟豆瓣登录（豆瓣6.0）在当今互联网时代，自动化处理网页操作的需求日益增长，Python作为一门强大的编程语言，在这方面有着广泛的应用。本文将深入探讨如何使用Python模拟登录豆瓣网站，并通过...

Requests方式登录网站

qq_39138295的博客

04-26

2176

最近遇到了一个网站，需要登陆才能看到有效的信息，抓包之后发现： activity=login&mmqd=true&loginType=main&nsrsbh_Cert=&clientHello=&wsdlOper=proQxrzLogin&clientAuthCode=&serverRandom=&nsrsbh_SerNum=&am...

使用requests传参模拟豆瓣登录

qq_39928840的博客

07-26

616

大家好，昨天写了一篇使用selenium进行模拟登录，同时也强调了selenium比较慢，今天呢，为大家带来一篇使用requests进行模拟登录，主要的问题就是分析在点击登录按钮的那一下之后，传了那些参数，下面，我们进入正题：先看看豆瓣登录页面，链接是：https://accounts.douban.com/login，页面如下，我们来分析一下，传哪些参数，随便输入账号12345678...

2024年C C++最全【算法基础】数位DP Acwing338，C C++开发知识点

2401_84973664的博客

05-13

418

【代码】2024年C C++最全【算法基础】数位DP Acwing338，C C++开发知识点。

使用requests库登录网站（http://124.223.75.75:5000/16）（用户名为admin、密码为123456）。...

weixin_35751194的博客

01-02

476

使用requests库登录网站需要先确定网站的登录接口。通常情况下，网站的登录接口为网站的登录页面的URL地址。登录的过程一般包含两个步骤：发送登录请求，提交用户名和密码。根据服务器返回的结果来判断是否登录成功。代码如下： import requests# 发送登录请求 url = "http://124.223.75.75:5000/16" data = { "usern...

python requests登录网页_Python 3.3.3 使用requests模拟登录网站

weixin_39860583的博客

12-21

1473

在模拟登录上,requests确实比python标准库中的相关模块更加简洁.假设你需要去爬一组页面(targetUrls),而这些页面要登录才能进行访问.那么requests能够提供一种相当简单的语法来实现.不过在此之前,你得先通过浏览器的开发人员工具确定:1.递交用户名和密码的页面(loginUrl)2.键值对(递交数据是以字典的形式)模拟举例:#确定登录页面地址和键值对loginUrl = "...

2.17.3-Python爬虫(requests登录)

KelvinLiu

05-27

3623

爬虫整理，使用python，目前写到了requests部分，包含requests的get和post、session登录。后续会把selenium部分补充起来

python requests登录_Python 利用 requests 登录站点的问题。

weixin_39631261的博客

11-29

173

大家好，我有个关于 python 的问题想要求助，在这里已经卡两天了，希望有经验的大侠们能帮忙看看。我想要作一个消息的确认器，这是给自己的练习，利用 requests 登入站点，确认是否有未读的新消息带浏览。我以前用 requests 也爬过几个网站，大部分一 post 出去，页面就乖乖吐出来了，我觉得一定是我缺少某方面的基础知识。下面是代码，使用的帐号是测试用的帐号，各位如果愿意，也可以直接拿来...

python requests实现登录

Jesse_Kyrie的博客

09-18

6072

requests+cookie实现登录爬虫

python 爬虫登录获取数据_【爬虫】使用python登陆豆瓣，存储cookie，获取数据

weixin_39789690的博客

12-08

481

import requestsimport picklefrom bs4 import BeautifulSoup# 提交表单登录并获取cookiedef get_cookie_from_net():url = "https://accounts.douban.com/j/mobile/login/basic"# 构建表单payload = {'ck': '','name': '账号','pass...