selenium+xpath获取href的坑

最新推荐文章于 2024-04-11 11:01:55 发布

weixin_30593443

最新推荐文章于 2024-04-11 11:01:55 发布

阅读量1.7k

点赞数 4

文章标签： python javascript ViewUI

原文链接：http://www.cnblogs.com/ymkdxw/p/10494924.html

版权

先上HTML文档

<html>
  <body>
    <a href="http://www.example.com">Example</a> 
    <a href="http://www.stackoverflow.com">SO</a> 
  </body>
</html>

上次用了正常情况下的xpth获取/html/body//a/@href就可以了

结果selenium报错…经过一番了解之后才知道大坑啊。。。

a = /html/body//a # 这里获取到a标签就好了

a.get_attribute('href') # 这样就可以获取到href的链接了

转载于:https://www.cnblogs.com/ymkdxw/p/10494924.html

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

weixin_30593443

关注关注

4
点赞
踩
5

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

拉勾网Python爬虫：Selenium+Xpath 反反爬、免登录获取全部职位详情

Python小蜗牛

03-15

2171

拉勾网Python爬虫：Selenium+Xpath反反爬、免登录获取全部职位详情需求描述需求分析实现原理注意问题备注：完整代码后续优化后记需求描述抓取拉勾网“北京”“数据分析师”30页职位详情数据生成 sql 文件需求分析拉勾网搜索页面一般都只展示30页、每页15个职位信息，约450条；拉勾网反爬加强，直接请求 positionAjax.json 无法获得包含职位信息的 json 数...

python selenium xpath定位方式

最新发布

雨滴测试博客

04-11

1704

1.xpath介绍 XPath 是一门在 XML 文档中查找信息的语言。XPath 用于在 XML 文档中通过元素和属性进行导航。而html中也应用了这种语言，所以，我们定位html页面元素时也会用到xpath这种方法。 2.xpath定位方式 xpath主要通过以下四种方法定位：路径定位属性定位多属性定位路径与属性结合定位以上的方法都是xpath本身具有的特性，它跟selenium现在还没有关系。而selenium为了支持xpath这种定位方式。故实现了一个方法，即： fin

webdriver selenium xpath

dancedan的专栏

03-29

5300

xpath 语法 / 表示从根节点开始查找//表示全文查找不填表示从当前节点查找@表示attribute, By.xpath("//iframe[@class='g-editor-iframe']" ref. xpath http://www.w3schools.com/xpath/ 获取iframe中的内容 S

python+selenium+xpath实用，避坑，爬虫篇

qq_36259105的博客

08-27

1335

selenium selenium可以模拟真实浏览器，自动化测试工具，支持多种浏览器。结合谷歌驱动，实现爬取数据。谷歌驱动下载地址：http://npm.taobao.org/mirrors/chromedriver/ 在谷歌浏览器上输入chrome://version/，可以看到自己谷歌对应的版本，并下载对应的谷歌驱动对应版本的84.0.4147对应上即可，后面的只是这个版本修复的次数。设置谷歌驱动参数 option = webdriver.ChromeOptions() option.add_

爬虫 selenium+Xpath 爬取动态js页面元素内容

weixin_30786657的博客

01-24

578

介绍 selenium最初是一个自动化测试工具,而爬虫中使用它主要是为了解决requests无法直接执行JavaScript代码的问题 selenium本质是通过驱动浏览器，完全模拟浏览器的操作，比如跳转、输入、点击、下拉等，来拿到网页渲染之后的结果，可支持多种浏览器 from selenium import webdriver browser=webdriver.Chrome...

selenium获取断言+元素等待+xpath高级用法

m0_64003025的博客

03-01

451

selenium获取断言+元素等待+xpath高级用法

python + Selenium+webdriver实现UI自动化（含示例）

Jerry的博客

09-23

1万+

一、原理 Selenium 是一个 Web 应用的自动化框架。通过它，我们可以写出自动化程序，像人一样在浏览器里操作web界面。比如点击界面按钮，在文本框中输入文字等操作，而且还能从web界面获取信息。 Selenium 的自动化原理如图所示：从上图可以看出：编写的自动化程序需要使用客户端库，程序的自动化请求都是通过这个库里面的编程接口发送给浏览器。比如，要模拟用户点击界面按钮，自动化程序里面就应该调用客户端库相应的函数，就会发送点击元素的请求给下方的浏览器驱动。然后，浏览器

传统推荐算法(一)利用SVD进行推荐（3）6个层面透彻了解奇异值分解

天行健，君子以自强不息

06-14

2403

文章目录写在前面1. 从几何变换到奇异值分解2. 代数角度理解奇异值与奇异向量2.1 从正交基映射推导SVD2.2 特征值分解求解奇异值和奇异向量2.2.1 求解过程2.2.2 推论2.3 SVD的另一种形式3. 几何角度理解奇异值与奇异向量3.1 从坐标变换理解3.1.1 从例子到一般3.1.2 两个问题3.2 形变的角度理解奇异值4. 奇异值的最好解读5. 特征值分解和奇异值分解区别6. 奇异...

讲解selenium 获取href find_element_by_xpath

牛肉胡辣汤

12-19

2726

XPath（XML Path Language）是一种用于在XML和HTML文档中定位元素的语言。在Selenium中，我们可以使用XPath来定位网页中的元素，包括链接。XPath表达式通过路径和表达式来选择元素，常用的表达式包括//（选取节点）、（选取属性）等。使用Selenium的方法可以轻松地获取网页中的链接地址。通过提供XPath表达式，我们可以定位到具有特定属性的元素，并获取对应的链接地址。

使用selenium的xpath方式抓取元素

原来是小雨啊的博客

07-05

1465

[]代表需要匹配的标签 @id= 代表属性的精确匹配 contains 代表属性的模糊匹配 @ 代表标签属性 div[3] 代表当下级有重复元素时，取第三个。在测试xpath是否可用时，可以通过chrome来验证xpath：在console中输入：$x(‘xpath表达式’)...

python-selenium中的Xpath元素定位方法&爬虫实践

qq_42200107的博客

05-10

9149

Xpath xpath学习地址：XPath 教程什么是xpath？ XPath是XML的路径语言，通俗一点讲就是通过元素的路径来查找到这个标签元素 XPath使用路径表达式在XML文档中进行导航普通语法注意！ 1.xpath中的值用引号引起来时，在代码中要注意区分，内单外双，内双外单。 2.xapth的class的值要填写全部，注意与find_element_by_class_name的区别。 3.xpath还支持逻辑运算符and/or，多用and来缩小范围，例如//*[@id=

selenium用find_element_by_xpath获取某个href的链接地址

qq_19391241的博客

07-29

4249

2、还有一个要注意，需要获取链接地址，还要将获取的值.get_arrtibute的属性，这样才能取到值，如current_url.get_attribute('href')，否则就会报错之类的。

selenium xpath总结

TestLearner的博客

07-20

7335

Xpath 语法 1. XPath 是XML 和Path的缩写，主要用于xml文档中选择文档中节点，XPath语言可以用在整棵树中寻找指定的节点 2. XPath 定位和CSS定位相比有更大的灵活性。XPath 在文档树中某个节点既可以向前搜索，也可以向后搜索，CSS定位只能在文档树中向前搜索，但XPath的定位速度比CSS 慢 3. 绝对定位方式： XP

selenium之xpath使用

一个菜鸟的博客

01-11

8570

XPath即XML路径语言，支持从xml或html中查找元素节点，使用XPath完全可以替代其他定位放式，如： find_element_by_xpath('//*[@id=""]')等同于find_element_by_id("") find_element_by_xpath('//*[@name=""]')等同于find_element_by_name("") find_element_by_xpath('//*[@class=""]')等同于find_element_by_class_name(

selenium利用xpath获取内容

07-17

使用 Selenium 和 XPath 获取内容的步骤如下： 1. 导入必要的库和类： ```python from selenium import webdriver from selenium.webdriver.common.by import By ``` 2. 创建 WebDriver 实例： ```python driver = webdriver.Chrome() # 使用 Chrome 浏览器，需要保证已安装 ChromeDriver ``` 3. 打开网页： ```python driver.get("https://example.com") # 替换为您要访问的网址 ``` 4. 使用 XPath 定位元素： ```python element = driver.find_element(By.XPATH, "your_xpath_expression") ``` 在上述代码中，将 `"your_xpath_expression"` 替换为您的 XPath 表达式。 5. 提取元素的文本或属性： ```python text = element.text # 提取元素的文本内容 attribute_value = element.get_attribute("attribute_name") # 提取元素的属性值，将 "attribute_name" 替换为实际的属性名 ``` 根据您的需求，选择 `text` 或 `attribute_value` 来获取元素的内容。请注意，上述代码中的 `"attribute_name"` 是要提取的属性名称，例如 `"href"`、`"src"` 或其他自定义属性。如果您只想获取元素的文本内容，可以只使用 `element.text`。希望以上信息对您有所帮助！如果您有其他问题，请随时提问。