python爬虫，在response乱码时进行转码的通用格式

如果print(response.text)出现非utf-8格式时，通过以下方式进行统一的格式转换。

def get_html(url):

    response = requests.get(url)
    return response.text.encode(response.encoding).decode('utf-8') #response.encoding为原来的编码格式，encode后编码为原来的格式，decode后解码为‘utf-8’

假如上面方法不生效，可以用下面这方法：

import requests
res = requests.get("https://www.baidu.com/")
res.encoding = res.apparent_encoding
print(res.text)

其他方法:

当去掉 accept-encoding: gzip, deflate, br 这个行信息后，响应的内容就可以正常读取文本内容