xpath十种高级用法

1、匹配某节点下的所有.//

2、匹配包含某属性的所有的属性值//@src

xpath('//@code')

3、选取若干路径 |

xpath('//div[@id="testid"]/h2/text() | //li[@data]/text()')

4、 Axes（轴）
child：选取当前节点的所有子元素

xpath('//div[@id="testid"]/child::ul/li/text()') #child子节点定位
xpath('//div[@id="testid"]/child::*') #child::*当前节点的所有子元素

attribute：选取当前节点的所有属性

xpath('//div/attribute::id') #attribute定位id属性值
xpath('//div[@id="testid"]/attribute::*') #定位当前节点的所有属性

ancestor：父辈元素 / ancestor-or-self：父辈元素及当前元素

xpath('//div[@id="testid"]/ancestor::div/@price')
xpath('//div[@id="testid"]/ancestor::div') #所有父辈div元素
xpath('//div[@id="testid"]/ancestor-or-self::div') #所有父辈及当前节点div元素
 descendant：后代 / descendant-or-self：后代及当前节点本身

同父辈元素

 following :选取文档中当前节点的结束标签之后的所有节点
xpath('//div[@id="testid"]/following::div[not(@id)]/.//li[1]/text()')
 namespace：选取当前节点的所有命名空间节点
xpath('//div[@id="testid"]/namespace::*') #选取命名空间节点

parent：选取当前节点的父节点

xpath('//li[@data="one"]/parent::ol/li[last()]/text()') 

preceding：选取文档中当前节点的开始标签之前的所有节点

xpath('//div[@id="testid"]/preceding::div/ul/li[1]/text()')[0] 
xpath('//div[@id="testid"]/preceding::li[1]/text()')[0] # 顺序是靠近testid节点的优先

preceding-sibling：选取当前节点之前的所有同级节点

xpath('//div[@id="testid"]/preceding-sibling::div/ul/li[2]/text()')[0] #只能是统计节点

self：选取当前节点

#选取带id属性值的div中包含data-h属性的标签的所有属性值
xpath('//div[@id]/self::div[@data-h]/attribute::*') 

5、position定位

xpath('//*[@id="testid"]/ol/li[position()=文本]/text()')[0]

6、条件

xpath(u'//h2[text()="文本"]/text()')[0]

7、函数

count：统计

xpath('count(//li[@data])') #节点统计

concat：字符串连接

xpath('concat(//li[@data="one"]/text(),//li[@data="three"]/text())')

string：解析当前节点下的字符

xpath('string(//li)') 

local-name：解析节点名称

xpath('local-name(//*[@id="testid"])') #local-name解析节点名称

contains(string1,string2)：如果 string1 包含 string2，则返回 true，否则返回 false

xpath('//h3[contains(text(),"H3")]/a/text()')[0] #使用字符内容来辅助定位

not：布尔值（否）

xpath('count(//li[not(@data)])') #不包含data属性的li标签统计

string-length：返回指定字符串的长度
#string-length函数+local-name函数定位节点名长度小于2的元素

xpath('//*[string-length(local-name())<2]/text()')[0] 

or：多条件匹配

xpath('//li[@data="one" or @code="84"]/text()') #or匹配多个条件 /也可使用 "|"

floor + div除法 + ceiling
#position定位+last+div除法，选取中间两个

xpath('//div[@id="go"]/ul/li[position()=floor(last() div 2+0.5) or position()=ceiling(last() div 2+0.5)]/text()') 

position+mod取余
#position+取余运算隔行定位

xpath('//div[@id="go"]/ul/li[position()=((position() mod 2)=0)]/text()') 

starts-with：以。。开始

xpath('//li[starts-with(@code,"8")]/text()')[0] #starts-with定位属性值以8开头的li元素

8、数值比较
<：小于
#所有li的code属性小于200的节点

xpath('//li[@code<200]/text()')

div：对某两个节点的属性值做除法

xpath('//div[@id="testid"]/ul/li[3]/@code div //div[@id="testid"]/ul/li[1]/@code')

9、将对象还原为字符串

s = tree.xpath('//*[@id="testid"]')[0] #使用xpath定位一个节点
值：<Element div at 0x2b6ffc8>
s2 = etree.tostring(s) #还原这个对象为html字符串

10、选取一个属性中的多个值

举例：<div class="mp-city-list-container mp-privince-city" mp-role="provinceCityList">
选择这个div的方案网上有说用and的，但是似乎只能针对不同的属性的单个值
本次使用contains
.xpath('div[contains(@class,"mp-city-list-container mp-privince-city")]')
当然也可以直接选取其属性的第二个值
.xpath('div[contains(@class,"mp-privince-city")]')