网络爬虫之解析网页【XPath】

最新推荐文章于 2024-04-11 16:52:20 发布

张润红

最新推荐文章于 2024-04-11 16:52:20 发布

阅读量549

点赞数

文章标签：网络爬虫之解析网页【XPath】

本文链接：https://blog.csdn.net/Zhangrunhong/article/details/103054281

版权

本文通过XPath语法演示如何解析网页，以51job网站为例，讲解如何爬取相关工作职位，特别是Python岗位的详细信息。

摘要由CSDN通过智能技术生成

文章目录

XPath语法演示案例

概念
在这里插入图片描述
使用：

"""
案例：使用XPath
"""

from lxml import etree

html_doc = """
<div>
    <ul>
        <li class="item-0"><a href="www.baidu.com">baidu</a>
        <li class="item-1 one" name="first"><a href="https://blog.csdn.net/qq_25343557">myblog</a>
        <li class="item-1 two" name="first"><a href="https://blog.csdn.net/qq_25343557">myblog2</a>
        <li class="item-2"><a href="https://www.csdn.net/">csdn</a>
        <li class="item-3"><a href="https://hao.360.cn/?a1004">bbb</a>
        <li class="aaa"><a