Python 爬虫使用 Selenium 如何在 WebElement 获得属性

于 2023-09-19 21:27:03 发布
阅读量1.6k 收藏
点赞数
文章标签： python 爬虫 selenium
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/huyuchengus/article/details/133047100
版权
本文介绍了如何使用Python的Selenium库，通过实例化FirefoxWebDriver并利用CSS选择器定位网页元素，然后获取其属性，如innerHTML。适合Python爬虫开发者学习基础操作。
摘要由CSDN通过智能技术生成

首先，我们需要初始化驱动和指定使用特定的流量器。

代码如下：

from selenium import webdriver
wd = webdriver.Firefox()

上面的代码可以简单的理解为启动一个 Firefox 的实例。

使用 css 选择器

可以把程序读取的 HTML 理解为一个 Doc。

我们需要在 Doc 中选择我们的元素，这个叫做选择器，通常来说 HTML 很多不同的选择器。

elem = wd.find_element_by_css_selector('#my-id')

上面的代码是使用 css 的选择器。

获得属性

但我们使用选择器获得元素后，下一步就是我们需要获得属性了。

Python 的代码为：

element.get_attribute('innerHTML')

这样我们就可以通过元素获得属性了。

Python 爬虫使用 Selenium 如何在 WebElement 获得属性 - Python - iSharkFly

python爬虫之selenium自动化——谷歌驱动（chrome webdriver），超详细！（13）
@CSDN盲敲代码的阿豪的博客
10-11 740
selenium是模仿人的行为，一种自动化驱动浏览器的工具，当我们运行相应代码，python就会通过安装的谷歌驱动（webdriver）打开谷歌浏览器，执行相应的动作；selenium 抓取的是浏览器渲染后的网页，而不是网页源码，所以只要浏览器能够看到的数据，selenium都能抓取；
Python爬虫之selenium
05-10 695
Python爬虫之selenium一：Selenium介绍二：selenium常用操作2.1 关闭页面2.2：定位元素2.3：操作表单元素2.4 行为链2.5 Cookie操作2.6 页面等待2.7 切换页面2.8 设置代理ip2.9 WebElement元素2.10 无界面浏览器 一：Selenium介绍 Selenium相当于是一个机器人。可以模拟人类在浏览器上的一些行为，自动处理浏览器上的一些行为，比如点击，填充数据，删除cookie等。chromedriver是一个驱动Chrome浏览器的驱动程序，
Python2+Selenium入门05-关于WebElement类
weixin_33766168的博客
02-24 249
前面一节主要介绍了 WebDriver 类，这一节则主要介绍 WebElement 类。WebElement 提供了一些功能、属性和方法来实现与网页元素的交互，这些元素主要包括文本框、文本域、按钮、单选框、多选框、表格等等。 WebElement功能 功能/属性 描述 实例 size 获取元素的大小 element.size ...
python+selenium的WebElement对象操作
小白龙白龙马的博客
12-13 981
webelement对象操作 webelement对象是selenium中所有元素的父类，也就是webelement对象拥有的方法，其它元素对象都会有； 只是不同的对象在调用特定方法时，效果是不一样的，即： 某些方法只是针对特定元素类型有效，而对其它类型无效。 (1)、clear：清空文本框中的文本，仅仅对有文本输入特性的元素有效；例如：文本框、多行文本框等； (2)、click：单击元素，可以...
Selenium WebElement: Selenium 中的页面元素以及常用的属性和方法
最新发布
还是应该要努力的（12点前睡觉！！！！！
08-29 3493
Selenium 中通过 find_element 获取到的页面元素的常用属性，以及操作方法
element元素 取属性_Selenium Webdriver获取元素的所有数据属性
weixin_39894104的博客
12-21 842
Using Selenium webdriver I have the following elementIs there a way to get all the data- attributes of the element?For a specific attribute I can useelem.getAttribute('data-1223')but how can I get all...
seleniumd对象的操作方法，属性，keys
weixin_30929195的博客
10-14 200
这是通过find方法找到的页面元素，此对象提供了多种方法，让我们可以与页面元素进行交互，例如点击、清空。 目录： 1. 方法 2. 属性 3. keys 方法 clear()清空 如果当前元素中有文本，则清空文本 click()单击 点击当前元素 get_attribute(name)获取对象属性 获取元素的attribute/...
python爬虫使用selenium运行报错“‘WebElement‘ object is not subscriptable”
weixin_55579895的博客
09-28 5323
其他解决方法 selenium运行报错“‘WebElement‘ object is not subscriptable”https://blog.csdn.net/weixin_46777073/article/details/107316005 find_elements_by_xxx() 用法以及 报错TypeError: ‘FirefoxWebElement’ object is not subscriptablehttps://blog.csdn.net/sunandstarws/article
python爬虫之Selenium数据爬取和数据可视化
weixin_50936255的博客
01-04 3752
本文爬取的数据为虎牙官方网站直播数据，仅获取了直播第一页的全部数据，对其进行了粗略的分析，数据获取时间为2021-01-03（22：00）。 目录1 前置条件2 定位标签3 获取数据3.1 导入库和使用驱动器打开网页3.2 获取分类和人气两个数据4 使用pandas分析数据5 使用Matplotlib画图5.1 柱状图5.2 饼图 1 前置条件 在使用本文代码前，需先下载selenium库、matplotlib库、pandas库和相对应浏览器的相应版本的驱动。 此处给出Chrome浏览器
Ｗeb自动化－python+selenium元素定位方法-WebElement
qq_33209580的博客
01-15 498
不仅WebDriver对象有选择元素的方法WebElement 区别：WebDriver对象选择元素的范围是整个web页面 WebElement对象选择元素的范围是该元素的内部 在整个web页面界面查找内容 get_class_animal1 = driver.find_element(By.ID, "animal") 将上个找到值向下查找，该元素内部元素 get_class_animal2 = get_class_animal1.find_element(By.TAG_NAME,"span
Selenium2+Python--常用方法分类
weixin_34055787的博客
03-16 109
常用方法分类 查找当前节点子节点方法 find_element_by_id 在当前节点查找指定id的子节点find_element_by_name 在当前节点查找指定name的子节点find_element_by_link_text 在当前节点查找指定链接...
python操作网页元素_python学习selenium2操作页面元素WebElement（四）
weixin_39871378的博客
12-03 445
本博文介绍python学习selenium2的操作页面元素WebElement，在selenium2中，通过By对象定位到对应的页面元素，然后调用这个页面元素的相关方法来进行操作。依据通过WebDriver的FindWelment()方法获得WebElement的对象实例。一般，使用的方法主要有如下部分，如下一一的介绍，并府附上对应的代码：Clicl()Click()方法用于执行单击元素的操作，如...
python+selenium 三种等待 及 Webelement类的方法
Light_Jewel的专栏
05-04 692
ebelement类的方法，常用的汇总如下： clear()清空 例如登录时先清空输入框中的内容 driver.find_element_by_id('username').clear() click(),单击 例如点击登录按钮 driver.find_element_by_id('submit').click() get_attribute()获取元素属性的值 zhi=driv...
selenium+Python常用webdriverAPI：控制浏览器、元素、webelement接口常用方法
kangkai0209的博客
11-26 1412
一、控制浏览器操作 （1）控制浏览器窗口大小： driver.set_window_size(400,800) //这里的宽高单位是像素，设置为窗口大小，宽400像素，高800像素 （2）刷新页面 driver.refresh() //刷新当前页面 （3）控制浏览器前进，后退 driver.get(“http://www.baidu.com”)//访问百度 driver.get(“http...
python webdriver API——webelement接口常用方法
一样学一点
09-16 629
webelement接口常用方法 size：查看元素的尺寸 text：返回元素的文本，获取不到不可见元素的文本信息 get_attribute：获取属性值，对不可见元素也可以 is_displayed：判断元素是否可见，返回结果为True或False from selenium import webdriver from time import sleep driver = webdriver.Chrome() driver.get('https://www.baidu.com/') #返回元素的尺
8.Selenium2 自动化测试实战-基于Python语言-WebElement接口2
lvxiaoting的专栏
04-01 949
*size:  返回元素的尺寸 *text: 获取元素的文本 *get_attribute(name):获得属性值 *is_displayed(): 设置该元素是否用户可见 from selenium import webdriver driver = webdriver.Chrome() driver.get("http://www.baidu.com") #获得输入框的尺寸 siz
html中的elestr作用,selenium 笔记10：webElement的属性&get_attribute()
weixin_42463199的博客
06-30 936
# -*- coding:utf-8 -*-"""@author:百草Lily@file:selenium_0430.py@time:2021/4/30"""import timefrom selenium.webdriver import Chromefrom selenium.webdriver.common.by import Bydriver = Chrome()driver.maximi...
Python网页抓取- python selenium使用方法和代码示例
weixin_45512098的博客
03-01 1029
python selenium使用方法和代码示例
Python爬虫通过Selenium控制Chrome浏览器技巧
Python爬虫之所以能够使用Chromedriver，是因为selenium库提供了与浏览器交互的能力。Selenium是一个强大的自动化测试工具，它允许用户在不同的浏览器上模拟用户行为，比如打开网页、点击按钮、填写表单等。当...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

HoneyMoose

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值