selenium用法详解

本文详细介绍了为何使用selenium进行动态网页爬取,包括安装selenium及浏览器驱动,如何创建WebDriver对象,使用各种查找元素的方法,以及如何通过WebElement对象进行页面操作。还提醒了在使用过程中注意不要直接打开浏览器。
摘要由CSDN通过智能技术生成

为什么使用selenium

因为有些网页是动态渲染的,如果使用传统的请求库进行爬虫,可能得不到所需要的内容,所以使用selenium库。

安装

1、selenium

selenium的安装方式详见参考资料[2]

pip install selenium

2、浏览器

可以安装谷歌,火狐,edge等浏览器。

3、浏览器对应的驱动

浏览器驱动可以到淘宝镜像站(详见参考资料[4])下载。

下载的时候注意浏览器驱动版本最好和浏览器版本一致。

下载后最好将浏览器驱动防止到Python安装目录的根目录下,不然可能会提示selenium.common.exceptions.WebDriverException 错误。

序号 浏览器 浏览器驱动
1 谷歌浏览器 ChromaDriver
2 火狐浏览器
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值