python学习之xpath使用案例总结_Python爬虫学习笔记（五）——XPath的使用

最新推荐文章于 2022-03-29 19:51:11 发布
最新推荐文章于 2022-03-29 19:51:11 发布
阅读量135 收藏
点赞数
文章标签： python学习之xpath使用案例总结
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_39869791/article/details/111451406
版权

介绍

XPath，全称XML Path Language，即XML路径语言，用来搜寻XML文档，也同样适用于HTML文档的搜索。所以，在做爬虫的时候，就可以使用XPath来做相应的信息抽取。python中相应的库为lxml库，需要自行安装

正文

XPath主要是有大量的方法，故我主要用代码的形式来记录。

XPath常用规则

表达式

描述

nodename

/

选取此节点的所有子节点

//

从当前节点选取直接子节点

.

选取当前节点

..

选取当前节点的父节点

@

选取属性

常用功能

from lxml import etree

text = '''

''&#

最低0.47元/天 解锁文章
weixin_39869791
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
el-tree:懒加载可选树状图&&服务端返回节点选中状态&&前端手动组装完整treeData
一个昵称叫铃风的小前端
11-02 898
问题： 1.懒加载时，当前展示的节点的子节点是未知的，假如之前编辑过，那前端需要字段来判断某个节点当前应该是什么状态：未选 半选 全选。 2.如果前端需要当前已获取的treeData,应该如何手动组装treeData。 一.懒加载必要性 当tree数据量过大时，服务端一次性返回全量的数据，服务端查表时间过长，http传输可能会时间过长，前端浏览器渲染时间也会过长。 以我的项目为例，大集团作为一级，二级是大集团下的组织和子公司，二级下依然包含组织和具体人员。tree总共四级，叶子节点上万。 二.代码实现 1）
JS之把节点插在另一个节点之后
_JS的博客
09-08 754
DOM编程艺术第七章动态创建标记 当HTML文件中有元素仅仅是为了一个函数脚本服务，那么用DOM方法来创建它们才是最合适的选择。 因为当有的浏览器不支持或禁用DOM，则可以平稳退化。 当然具体原因具体分析。 insertAfter insertAfter|由于DOM没有提供这种方法，所以可以自己编写。 // 把节点插在另一个节点之后 function insertAfter(newElement, targetElement) { var parent = targetElement.parentN
Leetcode 427. 建立四叉树 C++
weixin_43750513的博客
07-07 542
Leetcode 427. 建立四叉树 题目 给你一个 n * n 矩阵 grid ，矩阵由若干 0 和 1 组成。请你用四叉树表示该矩阵 grid 。 你需要返回能表示矩阵的 四叉树 的根结点。 注意，当 isLeaf 为 False 时，你可以把 True 或者 False 赋值给节点，两种值都会被判题机制 接受 。 四叉树数据结构中，每个内部节点只有四个子节点。此外，每个节点都有两个属性： val：储存叶子结点所代表的区域的值。1 对应 True，0 对应 False； isLeaf: 当这个
二叉堆
misterdo的专栏
02-09 233
二叉堆 定义：二叉堆是完全二叉树或近似完全二叉树。 二叉堆满足堆特性：父节点的键值总是保持固定的序关系于任何一个子节点的键值， 且每个节点的左子树和右子树都是一个二叉堆。 它分为两种：最大堆和最小堆。 最大堆：父结点的键值总是大于或等于任何一个子节点的键值； 最小堆：父结点的键值总是小于或等于任何一个子节点的键值。 最大堆示意图，数组中的存储形式在下面 插入 插入的数值先放在堆的最后，然后与其父节点进行比较交换 删除 用最后的数值来替换需要删除的数值，然后与其子节点中最大的值比较交换.
Python 爬虫学习笔记之多线程爬虫
01-20
其实我个人认为学习一下正则表达式是大有益处的，之所以换成 XPath ，我个人认为是因为它定位更准确，使用更加便捷。可能有的人对 XPath 和正则表达式的区别不太清楚，举个例子来说吧，用正则表达式提取我们的内容，...
python 爬虫学习笔记
03-09
Python 爬虫学习笔记涵盖了爬虫的基础知识、网络和前端基础、Requests 模块、请求头、GET 和 POST 请求、代理、Cookie 模拟登录、Quote 和 Unquote、登录和获取 Cookie、Post 和 Session、重试机制、JSON 和 ...
《python3网络爬虫开发实战》学习笔记：：selenium——xpath：Unable to locate element
01-08
selenium+firefox在定位时遇到selenium.common.exceptions.NoSuchElementException: Message: Unable to locate element: ...这种定位错误一般很少出现，因为其中的xpath路径一般是通过copy xpath而不是自
Python的Scrapy爬虫框架简单学习笔记
12-25
一、简单配置，获取单个网页上的内容。 （1）创建scrapy项目 scrapy startproject getblog （2）编辑 items.py # -*- coding: utf-8 -*- # Define here the models for your scraped items ...# See documentation ...
js添加多个子节点_javascript如何创建子节点
weixin_42696271的博客
02-17 2163
学习完HTM年据业会效近轻业务进果近轻业务进果近轻业L+css后，我并没有直接去学习HTML5和css3,而是开始学习JavaScript，现在就是jQuery基础也懂一点，js也懂一点，css3也懂得那么点。但是给我的感受就是不精通熟练，于是咬咬牙开始从心开始学起了JavaScript，这才是最基础最朋一发点层框很果4域合时近友些也，处架有为8或是还近友些也，处架有为8或是还近友些也，处架有为8...
JS实现DOM节点插入操作之子节点与兄弟节点插入操作示例
12-09
本文实例讲述了JS实现DOM节点插入操作之子节点与兄弟节点插入操作。分享给大家供大家参考，具体如下： <!doctype html> <html> <head> <meta charset="utf-8"> <title>www.jb51.net JS节点插入</title> [removed] function showinsert(){ //添加子节点 var str=document.getElementById("mydiv"); var zif="段落五"; var obj=document.createElement("p"); //
用 Vue.js 递归组件实现可折叠的树形菜单(demo)
11-29
在Vue.js中一个递归组件调用的是其本身，如： Vue.component('recursive-component', { template: `<!--Invoking myself!--> <recursive></recursive>` }); 递归组件常用于在blog上显示注释、嵌套的菜单，或者基本上是父和子相同的类型，尽管具体内容不同。例如:   现在给您演示一下如何有效地使用递归组件，我将通过建立一个可扩展/收缩的树形菜单的来一步步进行。 数据结构 一个树状UI的递归组件将是一些递归数据结构的可视化表达。在本教程中，
二叉查找树(BST)，平衡二叉树(AVL)，红黑树之间的区别
Linkai12138的博客
10-14 1479
1. 4者的区别与联系 二叉树，二叉查找树(BST)，平衡二叉树(AVL)，红黑树之间的区别： 根据百度百科给出的定义，它们之间的关系可以用下图表示，平衡二叉树（平衡二叉查找树，AVL）和红黑树都是二叉查找树的一种，区别就是平衡二叉树严格平衡，红黑树是弱平衡。 而AVL树由于实现比较复杂，而且插入和删除性能差，在实际环境下的应用不如红黑树。 2. 二叉查找树（BST） 2.1 定义 左子树的值小于根节点的值，右子树的值全部大于根节点的值；左右子树分别都是一颗二叉查找树。（递归定义） 3.1.2 缺点 可
红黑树和二叉树有什么区别
蔡定努
03-29 482
红黑树和二叉树有什么区别？ 什么是二叉树？什么是红黑树？ 二叉树（Binary Tree）是指每个节点最多只有两个分支的树结构，即不存在分支大于 2 的节点，二叉树的数据结构如下图所示 这是一棵拥有 6 个节点深度为 2（深度从 0 开始），并且根节点为 3 的二叉树 二叉树有两个分支通常被称作 “左子树” 和 “右子树”，而且这些分支具有左右次序不能随意地颠倒 一棵空树或者满足以下性质的二叉树被称之为二叉查找树 若任意节点的左子树不为空，则左子树上所有节点的值均小于它的根节点的值； 若任意节点的
ZooKeeper的Znode剖析
热门推荐
Leo的博客
07-02 2万+
在ZooKeeper中，节点也称为znode。由于对于程序员来说，对zk的操作主要是对znode的操作，因此，有必要对znode进行深入的了解。 ZooKeeper采用了类似文件系统的的数据模型，其节点构成了一个具有层级关系的树状结构。例如，图1展示了zk节点的层级树状结构。 图1：ZooKeeper的层级树状结构图1中，根节点 / 包含了两个字节点 /module1，/module2，而节点
networkx学习与使用——（5）节点和边的属性:聚集系数和邻里重叠度
hrk的博客
01-17 9798
networkx学习与使用——（5）节点和边的属性:割点、割边、聚集系数和邻里重叠度节点和边的属性:割点、割边、聚集系数和邻里重叠度点的属性割点邻居搜索算法 节点和边的属性:割点、割边、聚集系数和邻里重叠度 在networkx学习与使用——（2）度、邻居和搜索算法中，我们知道一个节点可以有度和邻居等直接的属性，一个度大的节点看上去比一个度小的节点重要。但我们如何用更多的属性去衡量节点或者边的重要性呢？我们不妨反过来思考，如果这个图少了这个节点或者这条边会发生什么呢？在networkx学习与使用——（4）连通
二叉树与红黑树
Gaodes的博客
10-27 322
应用场景： 1.服务器IO口，心跳包 2.多线程就绪，延时，等待，睡眠集合 二叉树的遍历分为：前序，中序，后序，按层次 如何检测二叉树数据对不对？ 可以使用中序遍历，因为中序遍历可以通过映射的方法来判断二叉树的数据对不对。 如何解决最坏情况下的二叉树？ 使用平衡二叉树的话，在插入数据的时候，性能会非常差，因为要进行多次的变换。 使用红黑树可以进行左旋，右旋进行树的调整，性能比较高。...
原生js在最后一个子元素插入html内容
清黎浅帆
10-22 1746
<div id="chat_msg_list" class="chat-message chat_msg_list"> <div class="clearfix chat-block" id="d0073000-1b58-4bfd-bb05-76c00e0f8b1f">11</div> <div class="clearfix chat-block" id="d0073000-1b58-4bfd-bb05-76c00e0f8b2f">22</div&
python中xpath的用法_python笔记--Xpath使用
最新发布
05-29
XPath是一种用于选择XML文档中节点的语言，是XML文档的标准查询语言。在Python中，我们可以使用lxml库来解析XML文档并使用XPath表达式来选择节点。以下是XPath在Python中的使用方法： 1. 导入lxml库 ```python from lxml import etree ``` 2. 解析XML文档 ```python tree = etree.parse('example.xml') ``` 3. 使用XPath表达式选择节点 ```python # 选择所有book节点 books = tree.xpath('//book') # 选择所有title节点的文本内容 titles = tree.xpath('//title/text()') # 选择第一个book节点的title节点文本内容 title = tree.xpath('//book[1]/title/text()') # 选择所有价格大于10的book节点 expensive_books = tree.xpath('//book[price>10]') ``` 以上是XPath在Python中的基本使用方法，可以根据自己的需求编写XPath表达式来选择XML文档中的节点。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值