【Python】Selenium爬虫提取标签属性值

最新推荐文章于 2023-02-14 17:49:01 发布
最新推荐文章于 2023-02-14 17:49:01 发布
阅读量3.9k 收藏 8
点赞数 3
分类专栏： 爬虫 文章标签： 爬虫 selenium 属性值 href 标签
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Asher117/article/details/106709407
版权

之前分享了一个selenium提取属性值得方法：老方法，这个方法很实用，可以将selenium获取得网页源码转成常用得BeautifulSoup格式，然后进行解析，今天用的时候看到一个更直接得方法，直接采用selenium自带得方法获取属性值，分享给大家：

driver = webdriver.Firefox()
driver.get(url)
driver.find_element_by_xpath('路径').get_attribute('href')

通过以上一行简单得代码就可以获取属性值了

Asher117
关注
  • 3
    点赞
  • 踩
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
python selenium 获取标签的属性值、内容、状态方法
12-25
获取标签内容 使用element.attribute()方法获取dom元素的内容，如： dr = driver.find_element_by_id('tooltip') dr.get_attribute('data-original-title') #获取tooltip的内容 dr.text #获取该链接的text 获取标签属性 link=dr.find_element_by_id('tooltip') link.value_of_css_property('color') #获取tooltip的CSS属性color的属性值 link.find_element_by_tag_name(
python爬虫学习笔记（10）xpath
weixin_43525209的博客
07-28 122
xpath:最常用且最便携高效的一种解析方式，通用性。 xpath解析原理： 1.实例化一个etree的对象，且 需要将被解析的页面源码数据加载到该对象中。 2.调用etree对象中的xpath 方法结合着xpath表达式实现标签的定位和内容的捕获。 环境的安装： pip install lxml 如何实例化一个etree对象 from lxml import etree 1.将本地的 HTML文档中的 源码数据加载到 etree对象中： etree.parse(filePath) 2.可以将从互联网上获
python 通过selenium 定位图片后获取src属性
suntao1995的博客
07-27 9611
https://python-selenium-zh.readthedocs.io/zh_CN/latest/4.%E5%85%83%E7%B4%A0%E5%AE%9A%E4%BD%8D/
Python+Selenium练习篇之20-获取元素上面的文字
热门推荐
Anthony_tester的博客
04-10 5万+
本文介绍如何通过Selenium方法来获取某一个元素的text属性值。在很多自动化测试脚本中，需要多次获取元素的text值，拿过来进行对比和匹配。例如，在一个登陆界面，如果不输入用户名和密码，直接点击登录，肯定会有相关错误提醒。这个错误，我们需要通过selenium抓取出来，和需求说明文档中的描述去进行匹配，如果匹配，测试成功，否则失败。
爬虫教程（ 5 ） --- Selenium、PhantomJS、selenium反检测、cdp ( ichrome )、Playwright、DrissionPage
freeking101的博客
09-01 6676
Selenium 是什么？一句话，自动化测试工具。简单的说就是一个可以用代码操所浏览器的工具。可以通过selenium进行搜索关键字，点击按钮等等操作。它支持各种浏览器，包括 Chrome，Safari，Firefox 等主流界面式浏览器，
Python爬虫，使用selenium爬取动态生成的网页数据 - 旧人笔记 - 旧人学习笔记 - 爬虫笔记 - 网络爬虫大白话
旧人小表弟的博客 - 学习笔记
10-17 1569
什么是AJAX AJAX（Asynchronouse JavaScript And XML）异步JavaScript和XML，在后台与服务器进行少量数据交换，Ajax可以使网页实现异步更新。这意味着可以在不重新加载整个网页的情况下，对网页的某部分进行更新。传统的网页（不使用Ajax）如果需要更新内容，必须重载整个网页页面。 因为传统的在传输数据格式方面，使用的是XML语法，因此叫做AJAX，其实现在数据交互基本上都是使用JSON，很少使用XML了。 使用AJAX加载的数据，即使执行了JS代码 将数据渲染到了
Selenuim+Python之元素定位总结及实例说明
weixin_30800807的博客
07-29 211
网页自动化最基本的要求就是要定位到各个元素，然后才能对该元素进行各种操作（输入，点击，清除，提交等），所以笔者今天来总结下Selenuim+Python最基本的几种定位方式及实例说明，希望能帮助到大家。 另外：学习元素定位方法前，建议先前往http://www.w3school.com.cn/html/index.asp 学习html前端基础知识，这个更加有利于定位。 ...
【Python】Selenium爬虫提取属性值（href为例）
Asher117的博客
11-19 1万+
提取属性值 之前使用爬虫解析HTML一直使用的是bs4里面的BeautifulSoup，最近因为模拟登陆要使用Selenium，所以就直接使用Selenium解析HTML。解析HTML很重要的一步就是提取标签元素的属性。 这里展示一下使用提取hrtf的值： div = driver.find_element_by_css_selector('#CSS_Selector') href = div.g...
chormedriver如何获取页面label值?
weixin_42608299的博客
02-14 169
如果要在 ChromeDriver 中获取页面标签的值，可以使用 Selenium WebDriver 的 API。下面是一个示例： from selenium import webdriver # 创建一个 ChromeDriver 实例 driver = webdriver.Chrome() # 访问页面 driver.get("http://www.example.com") # 获取...
Python selenium爬虫实现定时任务过程解析
09-16
主要介绍了Python selenium爬虫实现定时任务过程解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
python之selenium爬虫
02-21
python之selenium爬虫，使用python框架selenium，配合安装的chrome浏览器进行访问百度搜索，进行仿真的填写关键词、点击搜索、查看搜索结果。
python使用selenium爬虫知乎的方法示例
12-16
说起爬虫一般想到的情况是，使用 python 中都通过 requests 库获取网页内容，然后通过 beautifulSoup 进行筛选文档中的标签和内容。但是这样有个问题就是，容易被反扒机制所拦住。 反扒机制有很多种，例如知乎：刚...
python学习之爬虫(六)--selenium: 无头浏览器、selenium的基本使用、selenium元素定位的方法、selenium爬虫案例练习
浅弋、璃鱼的博客
04-21 3489
一、无头浏览器: 1.什么是selenium: Selenium是一个Web的自动测试工具, 最初是为了网站自动化测试二开发的, Selenium可以直接运行在浏览器上,特支持所有主流的浏览器(包括PhantomJS这些无界面的浏览器), 可以接收指令,让浏览器自动加载页面,获取需要的数据,甚至页面截屏. 2.Phantom JS的介绍: PhantomJS是一个基于Webkit的"无界面"(he...
【Python爬虫】爬取企业专利信息
Asher117的博客
08-02 2万+
本来是个美好的周末的，但是周五晚上领导给了一个公司名称的Excel，让把这些公司的专利信息爬取下来。本文记录了爬取企业专利信息的心酸过程。码字不易，喜欢请点赞！！！ 一、找寻目标网页 在接到这个任务之后，我的内心是拒绝的。但是又不能不干。因此首先我需要先找到有公司专利信息的地方。在一番查找和问了问朋友之后，我知道中国专利网、国家知识产权网、Incopat、天眼查、企查查这些网站上面都有企业的专利...
【Python】爬取**查公司电话以及地址信息
Asher117的博客
11-28 1万+
背景：其实两年前就爬了天眼查的很多信息，包括电话、地址等基本信息之外，还有公司的股东、专利以及对外投资等信息，但是当时的电脑没备份，代码都没了。这次山东的某个教育机构有偿找我帮爬天眼查公司电话以及地址信息，所以就重新爬了一下天眼查。 准备：selenium+PhatomJS或者selenium+Firefox 我这里直接用的后者selenium+Firefox 思路爬取这部分信息的话，代码其实不难...
[Python爬虫]模拟登陆**查网站
Asher117的博客
11-28 8296
这是一篇使用Python模拟登陆天眼查网站的详细介绍，天眼查网站上有许多的企业信息，因此抓取天眼查数据十分重要，本文使用selenium模拟登陆天眼查网站。 其实我之前就想写这个python模拟登录网站的，因为之前爬虫用的时候感觉还挺好用的，后来想学一下R爬虫再来用R写的，结果最近的爬虫还是用的python，so，给大家用python讲解咯。 今天给大家讲的是模拟登录“天眼查”这个网站，网站登录页...
【Python】Selenium爬虫提取文本内容
Asher117的博客
06-12 5703
如下图： 想使用selenium获取页面上的文字内容，非常容易，代码如下： driver = webdriver.Firefox() driver.get(url) driver.find_element_by_xpath('路径').text
为了学爬虫，我用三步爬取了大佬崔庆才爬虫相关文章，并保持为pdf学习
Asher117的博客
11-22 545
为了学习网络爬虫，我爬取了网络爬虫届大佬崔庆才的所有Python博客，并转换成了pdf，以便后续学习。 1.代码思路 获取所有博客的URL 获得每篇博客的html内容，并转化为pdf文件 合并pdf文件 2.获取所有博客URL 首先，通过崔老师的博客网站可知，目前Python博客内容包含7页，如下图 通过这些博客分类页面，很方面就能获得每篇博客的网址，代码如下： #获取所有URL def get_url(): url_list = [] for i in range(7,0,-1):
selenium爬虫获取html中标签中属性
最新发布
06-12
要获取HTML标签中的属性，可以使用Selenium中的`get_attribute()`方法。例如，如果要获取一个链接标签`<a>`中的`href`属性，可以使用以下代码： ...你可以根据你要获取的属性类型，将标签名和属性名替换为你需要的值。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值