使用 lxml 解析字符串或文件

 

lxml.etree.XMLSyntaxError: Opening and ending tag mismatch 问题解决方法:设置解析器
from lxml import etree

if __name__ == '__main__':
    text = "<div><p>Hello Python</p><p>Hello Java</p><p>Hello World</p></div>"

    # 从字符中进行解析
    tree1 = etree.fromstring(text)
    print(type(tree1))
    # 从字符串中进行解析 XML 文档或者片段
    tree2 = etree.XML(text)
    print(type(tree2))
    # 从字符串中进行解析 HTML 文档或者片段
    tree3 = etree.HTML(text)
    print(type(tree3))

    # 相同点:都是从字符串常量中进行解析
    # 不同点:fromstring 没有默认的解析器,XML 默认解析器是 XMLParser, HTML 默认解析器 HTMLParser
    #        fromstring 支持XMLParser、HTMLParser

    # 根据HTML代码的规范性,标签都要求是一对出现的,这种单标签需要补一个斜线,
    # 但是我们常用的IDE生成这一行代码的时候往往都不会自动补全一个斜线
    # 如果不想修改html 文件的话,可以在parse 函数中指定解析器

    # html = etree.parse(source="index.html", parser= etree.HTMLParser())
    # 默认情况下,parser 是使用 XMLParser, XML 的规范要求元素是闭合的。
    # lxml.etree.XMLSyntaxError: Opening and ending tag mismatch
    # 这个问题的解决方式就是在解析 HTML 的时候,使用 HTMLParser 或者修改 html 文件(不推荐)。
    html = etree.parse(source="index.html", parser= etree.XMLParser())

    type(html)

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Python 使用 `BeautifulSoup` 和 `lxml` 这两个库都是为了从 HTML 或 XML 文档中提取信息。它们主要用于网页爬取、数据抓取以及自动化处理网页内容。 ### Beautiful Soup **简介**: `BeautifulSoup` 是一个 Python 库,用于解析 HTML 或 XML 文件并提供一种简单的方式来提取和操作其结构化数据。它会将文件视为树形结构,并允许用户通过名称、属性或其他特征搜索元素。 #### 使用步骤: 1. **安装**: 可以通过 pip 安装 `beautifulsoup4`: ```bash pip install beautifulsoup4 ``` 2. **基本用法**: 首先导入 BeautifulSoup 并创建一个解析器对象,然后将其应用于 HTML 字符串。 ```python from bs4 import BeautifulSoup html_doc = """ <html><head><title>The Dormouse's story</title></head> <body> <p class="title"><b>The Dormouse's story</b></p> <p class="story">Once upon a time there were three little sisters; and their names were <a href="http://example.com/elsie" class="sister" id="link1">Elsie</a>, <a href="http://example.com/lacie" class="sister" id="link2">Lacie</a> and <a href="http://example.com/tillie" class="sister" id="link3">Tillie</a>; </p> ... """ soup = BeautifulSoup(html_doc, 'html.parser') print(soup.title.string) # 输出<title>标签内的文本 ``` ### LXML **简介**: `lxml` 是一个强大的 HTML/XML 解析库,提供了比 `BeautifulSoup` 更快速更全面的 XML 和 HTML 解析功能。它整合了 libxml2 的所有特性,并且有完整的 DOM API 支持。 #### 使用步骤: 1. **安装**: ``` pip install lxml ``` 2. **基本用法**: 与 `BeautifulSoup` 类似,你可以使用 `lxml.html` 来解析 HTML。 ```python from lxml import html html_text = """ <!DOCTYPE html> <html> <body> <p>...</p> </body> </html> """ root = html.fromstring(html_text) for link in root.xpath('//a'): print(link.text_content()) ``` ### 对比 - **性能**: `lxml` 因其底层依赖于 C 编写的 libxml2,通常在大量数据处理时速度更快。 - **功能**: `lxml` 提供更多高级功能和优化,如 XPath 支持等,对于复杂的数据抽取需求更有优势。 - **易用性**: `BeautifulSoup` 相对更易于学习和使用,特别是对于初学者来说。 ###
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值