Xpath常见用法

《Selenium超简单入门》一文中,介绍了Selenium爬取网页数据、网页自动测试的基本方法。而在使用Selenium过程中,经常需要查找页面中的DOM元素,我们必须告诉Selenium如何找到页面中的指定元素,然后它才能再执行诸如点击、获取Text等事件。而Xpath这时候就能派上用场,它是一门在xml、html文档中查找信息的语言,它通过简单的表达,就能描述某个节点在xml文档中的位置,从而让selenium找到这个节点。

下面结合笔者在使用selenium的经历,介绍Xpath最为常见的几个用法。

例子文档如下
<div>
 <div class='center'>
  <p>
    test1
  </p>
  <p>
   test2
  </p>
 </div>
</div>

假设我们要查找的是字符串test1所在的那个节点,该如何表示呢?它是p节点的内容,而这个P节点,是class值为center的div的第一个p节点。因此, 它的xpath可以这样描述://div[@class='center']/p[1]

注意表达式中的'//','@'.‘[1]',它们的作用是什么呢?
1.//
表示在整个html文档中进行查找。以本文为例,//后面跟着div,就表示在html文档中查找所有的div元素,例子中有两个div元素,因此满足条件的,也有两个。如果将//改成/,则表示从根节点开始查找,因此/div就表示查找根节点下的div元素,因此,尽管例子文档中有两个div,但满足条件的,只有根节点下的div
2.@
例子文档中,有两个div,如何准确表达我们要的div呢?注意到那个div是带有class属性,值为center的。它的xpath表达就是div[@class='center']。其中的class也可以换成其他的属性值,比如这个div是有id的,值为test,那么相应的xpath就是div[@id='test']
3.[1]
在例子文档中,满足//div[@class='center']/p这一规则的,有两个P节点,如果我们想要第一个,则需要加上[1],想要第二个,则要加上[2],以此类推。
4.*
*通配符,和正则表达式一样,它表示任意的字符。例子文档中,只有一个节点是带class,那么,我们可以不用明确指定它是一个div,换成//*[@class='center']/p[1]来表示,也是可以的。
  • 7
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
XPath是一种用于在XML和HTML文档中定位节点的语言。在Python中,使用lxml库来解析和处理XML和HTML文档,并使用XPath表达式来选择和提取节点。下面是一些常见XPath用法示例: 1. 选择节点: - 选择所有节点:`//*` - 选择指定节点:`//tagname`,例如:`//div` - 选择具有指定属性的节点:`//tagname[@attribute='value']`,例如:`//a[@href='http://example.com']` 2. 选择父节点、子节点和后代节点: - 选择父节点:`/..` - 选择子节点:`/tagname` - 选择后代节点:`//tagname` 3. 选择特定位置的节点: - 选择第一个匹配的节点:`(//tagname)[1]` - 选择最后一个匹配的节点:`(//tagname)[last()]` - 选择前n个匹配的节点:`(//tagname)[position() <= n]` 4. 选择具有特定文本内容的节点: - 选择包含指定文本的节点:`//tagname[text()='text']`,例如:`//p[text()='Hello World']` - 选择文本以指定字符串开头的节点:`//tagname[starts-with(text(), 'prefix')]` 5. 选择具有特定属性的节点: - 选择具有指定属性的节点:`//tagname[@attribute]` - 选择具有特定属性且属性值以指定字符串开头的节点:`//tagname[starts-with(@attribute, 'prefix')]` 6. 使用通配符选择节点: - 选择任意节点:`//*` - 选择任意子节点:`//tagname/*` - 选择当前节点的所有属性:`@*` 这些只是XPath的一些常见用法示例,XPath还有更多强大的功能和语法,可以根据具体需求灵活运用。在Python中,可以使用lxml库的`xpath()`方法来执行XPath查询,例如: ```python from lxml import etree # 解析HTML文档 html = etree.parse("example.html") # 执行XPath查询 nodes = html.xpath("//div[@class='content']") for node in nodes: print(node.text) ``` 以上是一些基本的XPath用法,你可以根据自己的需求进一步学习和使用XPath来处理XML和HTML文档中的节点。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值