获取xpath定位到的html的某整个标签下的html源码

本文介绍了在Python中利用XPath定位HTML元素时,如何获取整个标签的HTML源码。当XPath定位不精确到属性时,会返回一个元素列表,直接遍历可能导致错误。解决方法是遍历列表并提取每个元素的HTML内容。
摘要由CSDN通过智能技术生成

在运用xpath寻找定位html元素的时候,不定位具体属性的时候返回的是一个列表,这个列表里面的元素是字典,直接遍历打印这个列表会出现如下错误:

import requests
from lxml import etree

url = 'https://www.baidu.com/s?wd=jingdong1&tn=96327163_hao_pg'
head = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/75.0.3770.142 Safari/537.36'
}

res = requests.get(url,headers = head)
ahtml = etree.HTML(res.text)
blocks = ahtml.xpath('//*[@id="3001"]/div[2]/div/div[1]/a')
#打印整个a标签的html源码
content = etree.tostring(blocks[0])
print(content)

# 如果直接打印block或者循环遍历打印blocks的话会得到如下结果,这明显是不对的
print(blocks)
C:\Users\Administrator\Desktop\pythonsou>D:/pythonI-nstall/python.exe c:/Users/Administrator/Desktop/pythonsou/JD_spider/test.py
<Element img at 0x391b248>
#因为blocks是一个列表,而若用下面这种打印方法,不能够得到这整个标签的html代码
for bloc
  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值