python读取一个txt文档并生成一个html,Python从网页文件获取纯文本并拆分文本文件...

本文介绍了如何使用Python的BeautifulSoup和HTMLParser库从HTML文件中获取纯文本,并保持与浏览器显示的格式一致。通过自定义的HTML解析器,实现了去除标签但保留正确格式的功能,最后展示了主程序代码,包括解压HTML文件、提取纯文本和拆分文本文件。
摘要由CSDN通过智能技术生成

从HTML文件获取纯文本

通过BeautifulSoup获取纯文本

之前是通过BeautifulSoup (bs4)获取纯文本的,简单演示如下:

from bs4 import BeautifulSoup

htmfile = 'myweb.htm'

html = open(htmfile, 'r', encoding='utf-8')

htmlpage = html.read()

soup = BeautifulSoup(htmlpage.strip(), 'html.parser')

print(soup.text)

但是这样做的问题在于,其控制文本的格式或许与浏览器端显示的不一样

浏览器端显示的格式:

2c76dbea0cbb?utm_campaign=maleskine&utm_content=note&utm_medium=seo_notes&utm_source=recommendation

2018-06-01 14_36_17-Document.png

bs4抓取的文本格式如下:

2c76dbea0cbb?utm_campaign=maleskine&utm_content=note&utm_medium=seo_notes&utm_source=recommendation

2018-06-01 15_06_04-.png

为什么会这样呢?

因为在html源码中,存在这样的换行:

2c76dbea0cbb?utm_campaign=maleskine&utm_content=note&utm_medium=seo_notes&utm_source=recommendation

2018-06-01 15_09_30-Document.png

可以理解为bs4仅仅将html中的tag什么的去除了,但是并没有考虑格式与浏览器显示一致。

经过一番搜索,终于找到相应的方

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值