python处理html中的转义字符

最新推荐文章于 2024-08-13 04:20:28 发布

holybin

最新推荐文章于 2024-08-13 04:20:28 发布

阅读量1.2w

点赞数 2

分类专栏： Python 文章标签： python 转义字符

本文链接：https://blog.csdn.net/holybin/article/details/23872815

版权

Python 专栏收录该内容

6 篇文章 0 订阅

订阅专栏

最近在用python处理网页数据时，经常遇到一些html转义字符（也叫html字符实体），例如<> 等。字符实体一般是为了表示网页中的预留字符，比如>用>表示，防止被浏览器认为是标签，具体参考w3school的HTML 字符实体。虽然很有用，但是它们会极度影响对于网页数据的解析。为了处理这些转义字符，有如下解决方案：

1、使用HTMLParser处理


  
  
   
   import HTMLParser

html_cont =  "&nbsp;asdfg&gt;123&lt;"

html_parser = HTMLParser.HTMLParser()
new_cont = html_parser.unescape(html_cont)
print new_cont  #new_cont = " asdfg>123<"

转换回去（只是空格转不回去了）：


  
  
   
   import cgi
new_cont = cgi.escape(new_cont)
print new_cont  #new_cont = " asdfg&gt;123&lt;"

2、直接挨个替换


  
  
   
   html_cont =  "&nbsp;asdfg&gt;123&lt;"
new_cont = new_cont.replace('&nbsp;', ' ')
print new_cont  #new_cont = " asdfg&gt;123&lt;"

new_cont = new_cont.replace('&gt;', '>')
print new_cont  #new_cont = " asdfg>123&lt;"

new_cont = new_cont.replace('&lt;', '<')
print new_cont  #new_cont = " asdfg>123<"

不知道还有没有更好的办法。

另外stackoverflow上给出了在xml中处理转义字符的解答：python - What's the best way to handle  -like entities in XML documents with lxml? - Stack Overflow。