selenium模拟登陆豆瓣网

最新推荐文章于 2024-04-04 00:57:56 发布
最新推荐文章于 2024-04-04 00:57:56 发布
阅读量6.3k 收藏 4
点赞数
分类专栏： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhangcongyi420/article/details/103549890
版权
python 专栏收录该内容
15 篇文章 29 订阅 ¥9.90 ¥99.00
订阅专栏
本文介绍了使用selenium模拟登陆网站的方法，包括selenium的基本概念、为何选择selenium、登陆的总体思路，以及如何处理带有验证码的登陆。通过实例演示了登陆豆瓣网的过程，强调了在登陆时需要注意的细节，如跳转到密码登陆页面和处理验证码。
摘要由CSDN通过智能技术生成

前言

随着网站安全做的越来越好，不少网站，直接去爬取数据是无法爬出来的，必须要验证登陆，即登陆之后才能做后面的操作，因此需要解决的第一步就是登陆

登陆的常用方式：

1、使用request库，模拟post请求
2、使用框架自己集成的，比如在使用scrapy的时候，可以直接模拟登陆
3、使用selenium模拟浏览器登陆

前两种之前有大概的分享，下面使用selenium的方式模拟登陆

selenium简介

  • Selenium最初是由ThoughtWorks公司一个叫Jason R. Huggins的工程师和他的团队开发出来
  • Selenium是仅针对Web系统的一款自动化测试工具
  • Selenium是免费的、开源的，很多公司选择Selenium和它是免费的有很大关系
  • Selenium不是一个工具，它是一系列工具的总称
  • Selenium支持多种编程语言
  • Selenium支持多种浏览器
  • Selenium可以运行在多个平台上

对于开发人员来说，使用Selenium的好处是显而易见的，通过使用selenium的API，可以提取并分析html上的页面元素，并模拟用户的操作行为，进行事件处

了解本专栏 订阅专栏 解锁全文
小码农叔叔
关注
专栏目录
订阅专栏
使用selenium模拟登陆163邮箱
YingWGY的博客
04-11 7102
摘要 这次主要是稍微学习一下selenium，并进行简单的模拟登陆。网络上有许多有意思的网站，不同类型的网站爬虫策略不同，难度也不一样。从是否要登录这方面讲，一些简单网站不需要登录就可以爬取，比如猫眼电影、豆瓣250榜单等。还有一些是需要先登录才能爬取，比如微信、知乎、学校的教务系统等。 selenium是一个自动化测试工具，利用它可以驱动浏览器执行特定的动作，如点击、下拉等操作，同时还可以获取浏...
爬虫(10)selenium上 模拟登录豆瓣案例
m0_46738467的博客
01-22 922
1. 驱动安装 selenium介绍：selenium是一个web的自动化测试工具，最初是为网站自动化测试而开发的，selenium可以直接运行在浏览器上，它支持所有主流的浏览器，可以接收指令，让浏览器自动加载页面，获取需要的数据，甚至页面截屏。需要配合浏览器驱动使用。chromedriver是一个驱动Chrome浏览器的驱动程序，使用他才可以驱动浏览器。当然针对不同的浏览器有不同的driver。以下列出了不同浏览器及其对应的driver： Chrome：https://sites.google.com/
豆瓣有无验证码登陆+selenium
weixin_33951761的博客
08-21 356
from selenium import webdriver import time import requests from lxml import etree import base64 # 操作浏览器 driver = webdriver.Chrome() url = 'https://accounts.douban.com/login?alias=&redir...
使用selenium模拟豆瓣登录
qq_20528497的博客
02-09 1194
思路:使用selenium和chrome浏览器请求豆瓣网页，然后获取账号，密码输入框的位置，登录按钮的位置。 暂停1秒，再输入账号和密码。最后点击登录完成 所用技术：selenium 模块+chrome浏览器+time模块+requests模块 代码: from selenium import webdriver import time import requests account =input...
selenium模拟登录豆瓣网
qq_44739762的博客
09-27 685
豆瓣网有手机版和电脑版，两个有点不同。 1、登录流程 1、手机版 实例化driver，driver.get()发送请求 重点1：要先切换到iframe子框架，因为登录部分是放在iframe标签中，必须切换才能寻找到对应元素 重点2：要先点击用密码登录的按钮，不然找不到输入账号和密码的地方，还会报错NoSuchElementException: Message: no such element: ...
用selenium模拟登录豆瓣
Trial & Error
02-06 3744
注意 1.要先切换到输入账号和密码所在的子框架 2.先点击用密码登录的按钮，在进行输入位置的定位和输入 注意在iframe里面 代码 from selenium import webdriver import time url = 'https://www.douban.com' browser = webdriver.Chrome() browser.get(url) b...
python爬虫selenium登录豆瓣案例详解，Python面试宝典pdf
最新发布
2401_84023683的博客
04-04 757
学好 Python 不论是就业还是做副业赚钱都不错，但要学会 Python 还是要有一个学习规划。最后大家分享一份全套的 Python 学习资料，给那些想学习 Python 的小伙伴们一点帮助！
利用Python解决豆瓣验证码，实现模拟登陆！
Python学习Q群696455390
04-25 669
前言： 可能大家对于豆瓣并不怎么了解，我给大家简单介绍一下。 豆瓣是一个社区网站，该网站以书影音起家，提供关于书籍、电影、音乐等作品的信息，无论描述还是评论都由用户提供（User-generated content，UGC），是Web 2.0网站中具有特色的一个网站。网站还提供书影音推荐、线下同城活动、小组话题交流等多种服务功能，它更像一个集品味系统（读书、电影、音乐）、表达系统（我读、我看...
selenium模拟登录豆瓣和qq空间
demi的博客
08-22 422
selenium模拟登录豆瓣 今天又重新学习了下selenium，模拟登录豆瓣，发现设置等待时间真的是很重要的一步，不然一直报错：selenium.common.exceptions.NoSuchElementException: Message: no such element: Unable to locate element from selenium import webdriver import time driver=webdriver.Chrome(executable_path='D:/ch
selenium登录豆瓣网
weixin_30437481的博客
07-04 225
登录流程： 实例化一个driver，然后driver.get()发送请求 最重要的：切换iframe子框架，因为豆瓣的网页中的登录那部分是一个ifrme，必须切换才能寻找到对应元素 利用selenium切换到账号密码登录 利用selenium输入账户和密码 利用selenium点击登录按钮 然后利用字典推导式保存了一下cookie 代码实现： 1 impor...
selenium配置Firefox和chrome浏览器并模拟登陆豆瓣
mythinker2的博客
02-21 645
最新版本的selenium已不再支持
selennium模拟豆瓣登录实战演练
chenglin的博客
08-07 268
Selenium自动化测试 Selenium驱动Chrome浏览器，安装Chromedriver 浏览器驱动中包含了一个HTTP Server，用来接收这些http请求。HTTP Server接收到请求后根据请求来具体操控对应的浏览器。 登录豆瓣 要知道具体流程：定位元素然后操作（点击操作？输入操作？） 先进入首页（URL）http://www.douban.com/ 用户名密码登录 先定位（密码登录）元素，然后点击 Ctrl+F进行查找调试 CSS选择器进行定位（ul.tab-start
selenium实现豆瓣网的自动登录
weixin_51098806的博客
04-11 458
from selenium import webdriver import time from user import username,password driver = webdriver.Chrome(r"D:\chromedriver_win32\chromedriver.exe") #谷歌 driver.get(“https://accounts.douban.com/passport/login”) #打开网页 #定位元素 driver.find_element_by_class_name(“a
selenium模拟登录xx空间
m0_61846099的博客
11-03 219
代码中的定位发送验证码的那个标签的时候不知道为啥，总是定位不到这个标签，不能完成点击事件，所以可以自行在页面里面进行手动点击！建议不使用4.0以上的版本，因为在里面有些东西真的不好用，例如在进行标签定位的时候真的很难搞。
python实例豆瓣代码_Python实例：通过selenium模拟登陆豆瓣
weixin_39929566的博客
12-01 381
前几天写的《Python实例：分析豆瓣影片评论Ver 1.0版本》文章中，关于爬取数据过频繁导致IP被封禁的事情让我对豆瓣数据的爬取中断了。忽然想到之前有写过关于关于使用selenium库的webdriver来模拟用户的操作。那今天不妨试试使用selenium来模拟用户使用浏览器登陆豆瓣吧。首先需要导入的库有import urllib.requestfrom selenium import web...
python+selenium实现豆瓣网站登录
leeeeeena's blog
06-26 583
python+selenium实现豆瓣网站登录代码实现问题1：switch_to_frame(当前的iframe)知识点1：selenium的元素定位方法：知识点2：selenium基础用法 代码实现 from selenium import webdriver import time def main(): chrome_driver = 'C:\Program Files (x86)\Google\Chrome\Application\chromedriver.exe' driver
菜鸟写Python-Selenium操作：Selenium登录豆瓣并获取cookies
第一段代码的博客
08-10 2656
一、背景 很多时候，我们在爬取数据时，有些页面的数据需要登录才能看到，因此需要登录再爬取数据。实现login再爬取的手段很多，但核心都是通过cookie的方式来记录身份信息，因此模拟登录的核心在于对cookie的使用（获取、保存和使用）。 二、模拟登录方法 1、通过分析登录页面，获取登录接口和提交表单进行登录验证（可以用简单的Request库结合cookielib方式或者Scrapy等） ...
selenium模拟登录豆瓣（带滑动验证码）
qq_44628911的博客
11-26 1649
最近学习爬虫基础模拟登录豆瓣网站，记录下。网络比较卡，加的隐式等待时间比较多 全部代码： from selenium import webdriver from selenium.webdriver.common.keys import Keys from selenium.webdriver.common.by import By from selenium.webdriver import ActionChains def get_tracks(distance): """ ..
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

小码农叔叔

谢谢鼓励

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值