python网络爬虫(第五章:xpath之数据解析)

学习文档:https://book.apeland.cn/details/66/

xpath解析

xpath解析:最常见且最便捷高效的一种解析方式,通用性强。

xpath解析原理

1.实例化一个etree的对象,且需要将解析的页面源码数据加载到etree对象中
2.调用etree对象中的xpath方法,并结合xpath表达式实现标签的定位和内容的捕获。

环境的安装

pip install lxml

如何实例化一个etree对象

1.将本地的html文档中的源码数据加载到etree对象中:
	etree.parse(filePath)
2.将从互联网上获取的源码数据加载到etree对象中
	etree.HTML('page_text')
---xpath('xpath表达式')

xpath表达式

tree = etree.parse(‘test.html’)

符号功能功能
/从根节点开始已定位,表示的是一个层级r = tree.xpath(’/html/body/div’)
//1.表示多个层级。2.可以表示从任意位置开始定位r = tree.xpath(’/html//div’) 或者r = tree.xpath(’//div’)
tag[@attrName=“attrValue”]属性定位r = tree.xpath(’//div[@class=“song”]’) 【首先从根目录定位到所有的div属性,之后经过@class定位到class=song的标签下】
tag[@attrName=“attrValue”]/tag[num]索引定位[索引定位是从1开始的]r = tree.xpath(’//div[@class=“song”]’) /p[3]
/@attrName属性r = tree.xpath(‘div[@class=“song”]/img/@src’) 表示的是div标签中class=song属性下的子img标签下的src标签内容
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值