selenium用法详解

最新推荐文章于 2024-10-05 22:05:13 发布

此生小会

最新推荐文章于 2024-10-05 22:05:13 发布

阅读量1k

点赞数

分类专栏：爬虫文章标签： selenium python 爬虫

本文链接：https://blog.csdn.net/cckavin/article/details/104943885

版权

本文详细介绍了为何使用selenium进行动态网页爬取，包括安装selenium及浏览器驱动，如何创建WebDriver对象，使用各种查找元素的方法，以及如何通过WebElement对象进行页面操作。还提醒了在使用过程中注意不要直接打开浏览器。

摘要由CSDN通过智能技术生成

为什么使用selenium

因为有些网页是动态渲染的，如果使用传统的请求库进行爬虫，可能得不到所需要的内容，所以使用selenium库。

安装

1、selenium

selenium的安装方式详见参考资料[2]。

pip install selenium

2、浏览器

可以安装谷歌，火狐，edge等浏览器。

3、浏览器对应的驱动

浏览器驱动可以到淘宝镜像站(详见参考资料[4])下载。

下载的时候注意浏览器驱动版本最好和浏览器版本一致。

下载后最好将浏览器驱动防止到Python安装目录的根目录下，不然可能会提示selenium.common.exceptions.WebDriverException 错误。

序号	浏览器	浏览器驱动
1	谷歌浏览器	ChromaDriver
2	火狐浏览器

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

此生小会

关注关注

0
点赞
踩
2

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Selenium用法详解【浏览器控制】【JAVA爬虫】

洛阳泰山的博客

01-15

746

本文主要讲解如何使用java代码利用selenium多浏览器的各种控制的代码教程。Selenium 是一种用于自动化浏览器操作和测试的工具，可以通过编程语言与浏览器进行交互。它提供了一组 API 和库，用于模拟用户在浏览器中的各种行为，如点击、输入、导航等。下面将详细介绍 Selenium 浏览器控制的基本原理、使用方式以及在实际应用中的应用场景。

Selenium浏览器自动化测试框架

invoker

08-09

126

selenium简介介绍　　Selenium[1]是一个用于Web应用程序测试的工具。Selenium测试直接运行在浏览器中，就像真正的用户在操作一样。支持的浏览器包括IE（7, 8, 9, 10, 11），Mozilla Firefox，Safari，Google Chrome，Opera等。这个工具的主要功能包括：测试与浏览器的兼容性——测试...

参与评论您还未登录，请先登录后发表或查看评论

selenium使用

09-27

selenium使用说明selenium使用说明selenium使用说明selenium使用说明selenium使用说明selenium使用说明selenium使用说明

selenium 常用方法

最新发布

Uarecharming的博客

10-05

999

②使当前驱动指向另一个标签页的句柄(调用switchTo().window()方法，将想要跳转的标签页的句柄传入参数中) 参数中可以传入该标签的其他属性比如尝试获取到这个标签中的 submit 也就是 type 的值。②:第二次，此时driver指向的标签页被关闭，也就是driver此时指向的是一个null。每个li 标签下的 a 标签下的第二个 span 标签存着我们要获取的文本。

Selenium使用方法

m0_54255329的博客

06-03

703

一、x-path练习:图片保存 import requests from lxml import etree import csv def get_net_data(): url = 'https://www.umei.net/' response = requests.get(url) response.encoding = 'utf-8' print(response.text) return response.text def download_imag

Selenium的基本使用

weixin_34220834的博客

07-03

154

一、Selenium的Java编程基本语法　　在Selenium的基本语法中首先是需要定位到页面元素的，Selenium通过找寻到界面元素然后触发相应的时间，通过页面元素变化判断是否执行了相应的操作。　　可以通过页面元素的属性获取相应的页面元素。　　1.通过Identifier(id)定位元素　　所给出的定位的HTML元素必须要有identifi...

selenium使用大全

weixin_58520733的博客

04-10

4407

selenium使用使用selenium有一个硬性条件，1;使用Google浏览器 2:下载chromedrive.exe工具。驱动的下载地址如下： http://chromedriver.storage.googleapis.com/index.html 查看浏览器的版本:浏览器右上角三个点: > 帮助 > 关于Google chrome -- 89.0.4389.90 根据这个数字去找对应的版本工具 -- 找到之后点进去: linux, mac win -- 89.0..

python网络爬虫 Scrapy中selenium用法详解

12-26

那么如果我们想要在scrapy也获取动态加载出的数据，则必须使用selenium创建浏览器对象，然后通过该浏览器对象进行请求发送，获取动态加载的数据值。 1.案例分析： – 需求：爬取网易新闻的国内、国际、军事、无人机...

selenium 的使用方法

weixin_42109237的博客

08-23

669

一、WebDriver中常见的几种方法： 1、clear(): 清除文本 2、send_keys(value): 模拟按键输入 3、click(): 单击元素 4、submit(): 回车，用于提交表单 5、back(): 后退...

selenium用法

摘月

07-04

4197

selenium：只要人能做的，都可以使用代码实现隐式，显式等待模拟前进后退切换选项卡执行js异常处理动作链：模拟点击，拖拽行为自动登录12306（前端能够检测到是否使用了selenium）获取登录的cookie继续使用selenium：add_cookie使用requests携带cookiexpath语法：lxml为例（lxml是解析器），bs4、re、selenium自带的、lxml这些都有xpath、css。

selenium常用使用方法

qq_41596734的博客

02-23

248

本文章主要总结selenium的浏览器基本操作、元素查找方式、鼠标和键盘事件、窗口&iframe切换、select下拉框、弹框、JS处理、元素（el）信息、文件上传&下载、JS原生查找元素方法、思路集合、显示等待、cookie处理、断言、selenium常见异常、框架等内容。详细见图片 ...

selenium用法大全

Python_BT的博客

09-01

2484

selenium中的基础用法大全标红为最常用 1、输入框（input）： driver.find_element_by_id("3").get_attribute('value') 2、页面文本 driver.find_element_by_xpath("//*[@id='3']").text 3、页面标题 driver.title 4.获取输入框内容： #当我们使用send_keys输入的内容不存在页面标签中时，可以通过get_property()获取当前文本框显示的内容 driver.find

selenium用法（最新版）