Python爬虫——Selenium介绍和Selenium WebDriver安装

最新推荐文章于 2024-06-24 22:00:02 发布
最新推荐文章于 2024-06-24 22:00:02 发布
阅读量863 收藏 2
点赞数
分类专栏： Python编程 文章标签： python selenium
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/day_to_die/article/details/104736821
版权
本文介绍了Selenium的基本概念，包括它的IDE和WebDriver模块，并详细阐述了在Python环境中安装selenium和对应浏览器驱动的过程。针对Firefox和Chrome的安装给出了建议。此外，文章还总结了selenium使用过程中常见的错误及其解决方案，如路径问题、忘记关闭webdriver、不匹配的能力问题以及网络错误等。
摘要由CSDN通过智能技术生成

Selenium介绍和Selenium WebDriver安装


前言：本来是打算在完成一阶段爬虫学习的时候再对此章节进行总结，但是因为在使用selenium模块的时候遇到了浏览器类型和webdriver的兼容性问题，在经过近1天的排列组合搭配后终将此问题解决，于是决定对selenium模块进行一次总结。

前置知识：

  • Python爬虫

1. selenium是什么

  • selenium中文网
  • selenium 是web自动化测试工具集，包括IDE、Grid、RC（selenium 1.0）、WebDriver（selenium 2.0）等，其中就有包括模拟用户访问浏览器对web网站进行访问的模块，而在python中可以通过调用webdriver实现。不仅仅是python，也同时支持多种编程语言。而在python中可以利用selenium中的webdriver对浏览器进行交互，从而实现浏览器爬取网页内容的过程。
  • selenium IDE 是是firefox浏览器的一个插件。提供简单的脚本录制、编辑与回放功能。如果有需要的话可以自行下载Selenium IDE
  • WebDriver 这里可以理解为一套规范，在这套规范里定义客户端脚步与浏览器交互的协议。（例如下面通过webdriver调用浏览器进行爬虫，并通过id获取html中指定元素）
最低0.47元/天 解锁文章
幼稚调皮的钟
关注
专栏目录
Python爬虫——Selenium安装配置FireFox浏览器
NoBugNoLife的博客
03-09 1万+
Selenium安装配置FireFox浏览器
selenium WebDriver比较新的安装包
10-31
selenium WebDriver 安装包及启动服务的一些命令 对于正在学习自动化测试的小伙伴们非常有用
什么是 Selenium 和 WebDriver?
yx_ming的博客
08-21 1万+
Selenium是一个浏览器自动化操作框架。selenium主要由三种工具组成。 1.第一个工具——SeleniumIDE，是Firefox的扩展插件，支持用户录制和回访测试。录制/回访模式存在局限性，对许多用户来说并不适合。 2.因此第二个工具——Selenium WebDriver提供了各种语言环境的API来支持更多控制权和编写符合标准软件开发实践的应用程序。 3.最后一个工具——Sel...
Selenium下载与安装_selenium下載和安裝步驟
最新发布
2401_85599179的博客
06-24 1394
下载解压后，将chromedriver.exe , geckodriver.exe , 移动到Python的安装目录，例如 D:\python\Anaconda\Scripts。经常会出现代码执行完了，但是网页内容还没有加载完毕，里面的标签还没有显示出来，如果这时候操作里面的标签就会报出异常 NoSuchElementExpection。当你触发了某个事件之后，页面出现了弹窗提示，处理这个提示或者获取提示信息方法如下。：不管页面的内容有没有加载完毕，一定要休眠够指定的秒数。
自动化测试之selenium的chromedriver安装、配置的全部问题详解（保姆级教程）
热门推荐
计算机小white博客
12-23 2万+
自动化测试中配置chromedriver和chrome的版本适配问题的详解，希望入门自动化测试需要使用到selenium的小伙伴们少走弯路！
selenium和webdriver区别
记录那点滴的改变的专栏
09-25 1539
selenium 2 = selenium 1.0 + webdriver. selenium和webdriver区别 接触selenium大概半年时间了。从开始的预研，简单的写个流程到后期的自动化框架的开发，因为本人不属于代码方面的大牛，一直的边研究边做。逐步深入学习。近期发现自己对本身selenium的发展还存在困惑，这个也会困扰刚开始做的人，不了解为啥又是seleni
selenium+webdriver爬虫技术
伤心的辣条
06-20 1238
在一个网页文档中，多个网页元素可以有相同的class类名，这样使得多个网页元素具有相同的显示样式，而id名则相对唯一，即一个元素使用单独的id名，这样可以精确定位到这个元素。但如果要使用python来操作selenium模块的webdriver对象，模拟浏览器操作，还需要支持的浏览器驱动器，如要使用chrome浏览器软件，就需要在python安装目录下将chrome浏览器的驱动器拷贝进去，如果要使用其他类型浏览器软件，就下载其他浏览器的驱动器到python安装目录，在某些标签内还可以使用关联的属性来描述。
Python爬虫——selenium模拟京东网站登录（一）
01-20
from selenium import webdriver 2.浏览器获取驱动 需要下载跟chrome浏览器相匹配的驱动driverchrome.exe，详情见：根据电脑浏览器的版本下载相应的驱动chromedriver.exe，环境变量的配置，详情见这里Window 下配置...
python selenium爬虫需要账号和密码登陆的网页_Python爬虫——selenium模拟京东网站登录（一）...
weixin_29258297的博客
02-09 2013
1.导入需要的库import timefrom selenium import webdriver2.浏览器获取驱动需要下载跟chrome浏览器相匹配的驱动driverchrome.exe，详情见：根据电脑浏览器的版本下载相应的驱动chromedriver.exe，环境变量的配置，详情见这里Window 下配置ChromeDriver(简单4步完成)再将driverchrome.exe复制到Ana...
selenium驱动安装配置
墨渊的博客
04-30 528
selenium 是一款 自动化测试工具 半开放测试框架测试人员专用 下面我们简单介绍一下python 安装selenium配置浏览器驱动 #安装这个库 # pip install selenium #导入这个库 from selenium import webdriver #打开谷歌驱动 driwer = webdriver.Chrome() #访问百度 driwer.get('http://www.baidu.com') #安装这个库 如图所示 驱动下载地址 提取码 7jmz 下载后随便在一个
selenium webdriver (python) 第一版
08-30
selenium webdriver 关于python语言的实现，目前最全面实用的文档，虫师首发。
自动化测试之selenium的chromedriver安装、配置的完整流程（取需要的步骤走即可，不一定要全部都走）
m0_63229791的博客
06-02 1万+
自动化测试之selenium的chromedriver安装、配置的完整流程
Selenium安装与配置
学而思(xiejava的blog)
02-22 3443
Selenium是一个用于Web应用程序测试的自动化工具。它直接运行在浏览器中，模拟真实用户的操作。Selenium支持多种主流浏览器，如IE、Mozilla Firefox、Safari、Google Chrome、Opera和Edge等。在爬取数据的时候对于需要登录后才能爬取的情况往往可以利用Selenium来进行模拟登录，登录后进行数据的获取。这里先介绍Selenium的安装与配置，实现通过python来驱动浏览器进行操作。
Selenium和ChromeDriver的安装，简单使用
sampsonjun的博客
01-17 373
Selenium和ChromeDriver的安装，python动态渲染页面爬取
selenium安装与driver配置
manfred1010的博客
12-16 1271
selenium安装 对应Python语言来说，Selenium客户端库的安装非常简单，用 pip 命令即可。 打开 命令行程序，运行如下命令 pip install selenium Selenium只是操控网页的工具，我们还需要浏览器工具帮忙打开网页。 driver的安装 浏览器驱动 是和 浏览器对应的。 不同的浏览器 需要选择不同的浏览器驱动。 目前主流的浏览器中，谷歌 Chrome 浏览器对 Selenium自动化的支持更加成熟一些。 chromedriver的安装一定要与Chrome的版本一致，
Webdriver概述（selenium对应浏览器版本）
bangqiang9716的博客
12-22 331
Webdriver (Selenium2）是一种用于Web应用程序的自动测试工具，它提供了一套友好的API，与Selenium 1（Selenium-RC）相比，Webdriver 的API更容易理解和使用，其可读性和可维护性也大大提高。Webdriver完全就是一套类库，不依赖于任何测试框架，除了必要的浏览器驱动，不需要启动其他进程或安装其他程序，也不必像Selenium 1那样需要先...
selenium基础：常用方法、元素定位、元素等待
qq_17542397的博客
11-01 7766
一、Selenium中的WebDriver常用方法: get(url)：get方式请求url driver.get('http://www.baidu.com') back()：浏览器后退操作 driver.back() forward()：浏览器前进操作 driver.forward() save_screenshot(name)：保存截图 driver.save_screenshot('baidu.png') title()：获取title标签，或者使用title属性
selenium.common.exceptions.SessionNotCreatedException: Message: session not created: No matching capabilities found
05-19
这个错误通常是由浏览器版本与Selenium驱动程序不兼容引起的。你可以尝试以下解决方案： 1. 确保你的浏览器和Selenium驱动程序版本匹配。可以在Selenium官网上查看版本兼容性信息。 2. 如果你使用的是Chrome浏览器，请确保你已经下载了与你的Chrome浏览器版本相匹配的ChromeDriver驱动程序。可以在ChromeDriver官网上下载。 3. 检查你的代码中是否有语法错误或逻辑错误。有时候代码错误也会引起这个错误。 4. 如果你正在使用远程浏览器，确保远程浏览器配置正确，并且网络连接正常。 如果以上方法都不能解决问题，你可以尝试升级或降级Selenium和浏览器版本，或者尝试使用其他浏览器来测试。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值