url时会导致乱码问题:
%252016%25E8%25BF%259B%25E5%2588%25B6%25E8%25BD%25AC%25E4%25B8%25AD%25E6%2596%2587
解决方式:
decodeURI()进行转换为中文
python抓取数据时也会导致数据乱码:
固安华电天仁控制设备有限公司风电变桨2019年上半年国产低压电机【二次挂网】招标公告
解决方式:
Unicode转Native
安装:pip install HTMLParser
1.from HTMLParser import HTMLParser
2.3.0版本需修改修改:
找到安装python的目录下:HTMLParser(引入后调用会报错,报错时会将地址输出出来)
import markupbase为import _markupbase as markupbase (在源码的第11行)
修改return unichr©为return chr© python3中没有unichr,用chr即可(在源码的456行
使用:HTMLParser().unescape(“字符”) by:本方法学自我是大伟