基础爬虫系列课程授课内容3——xpath语法

轴名称::节点测试[谓语]

举个例子：

四、常用函数

---

1、 starts-with函数

获取以xxx开头的元素

例子：xpath(‘//div[stars-with(@class,”test”)]’)

2、contains函数

获取包含xxx的元素

例子：xpath(‘//div[contains(@id,”test”)]’)

3、and

与的关系

例子：xpath(‘//div[contains(@id,”test”) and contains(@id,”title”)]’)

4、 text()函数

例子1：xpath(‘//div[contains(text(),”test”)]’)

例子2：xpath(‘//div[@id=”“test]/text()’)

五、lxml的xpath示例

---

#coding=utf-8

from lxml import etree

html = ‘’’

Top News

World News only on this page

Ah, and here’s some more text, by the way.

... and this is a parsed fragment ...

青少年发展基金会

洛克王国

奥拉星

手机游戏

手机壁纸

4399小游戏

91wan游戏

‘’’

page = etree.HTML(html.lower().decode(‘utf-8’))

hrefs = page.xpath(u"//a")

for href in hrefs:

print href.attrib

打印出的结果为：

{‘href’: ‘http://www.cydf.org.cn/‘, ‘target’: ‘_blank’, ‘rel’: ‘nofollow’}

{‘href’: ‘http://www.4399.com/flash/32979.htm‘, ‘target’: ‘_blank’}

现在能在网上找到很多很多的学习资源，有免费的也有收费的，当我拿到1套比较全的学习资源之前，我并没着急去看第1节，我而是去审视这套资源是否值得学习，有时候也会去问一些学长的意见，如果可以之后，我会对这套学习资源做1个学习计划，我的学习计划主要包括规划图和学习进度表。

分享给大家这份我薅到的免费视频资料，质量还不错，大家可以跟着学习

小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数初中级Python工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年Python爬虫全套学习资料》送给大家，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

由于文件比较大，这里只是将部分目录截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频

如果你觉得这些内容对你有帮助，可以添加下面V无偿领取！（备注：python）

同时减轻大家的负担。**

由于文件比较大，这里只是将部分目录截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频

如果你觉得这些内容对你有帮助，可以添加下面V无偿领取！（备注：python）
[外链图片转存中…(img-zNKaYsOF-1710903794781)]