故乡的云

原创 解决Requests库抓取网页中文输出乱码的问题

今天在做爬虫的简单练习时候遇到一个输出乱码的问题：经查，当你收到一个响应时，Requests会猜测响应的编码方式，用于在你调用 Response.text 方法时 对响应进行解码。Requests首先在HTTP头部检测是否存在指定的编码方式，如果不存在，则会使用 charade 来尝试猜测编码方式。只有当HTTP头部不存在明确指定的字符集，并且 Content-Type 头部字段包含 text 值...