成功解决UnicodeEncodeError: ‘gbk‘ codec can‘t encode character ‘\ue615‘ in position 437680问题

解决 UnicodeEncodeError: ‘gbk’ codec can’t encode character ‘\ue615’ in position 437680: illegal multibyte sequence问题

我们首先要明确下面的内容：
在硬盘上和网络上传输的字符串都是bytes类型。
write（）写入的内容必须是str类型
response.content是byte类型 转化成str类型则是：response.content.decode（‘utf-8’）
reponse.txt是str类型

下面是产生此问题的代码：

import requests
param={
    'wd':'中国'
}
headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/75.0.3770.100 Safari/537.36'}

response = requests.get('http://www.baidu.com/s',params=param,headers=headers)
with open('baidu.html','w') as fp:
    fp.write(response.content.decode('utf-8'))

经过分析是由于with open(‘baidu.html’,‘w’) 没有进行编码
修改后的代码如下图所示：

import requests
param={
    'wd':'中国'
}
headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/75.0.3770.100 Safari/537.36'}

response = requests.get('http://www.baidu.com/s',params=param,headers=headers)
with open('baidu.html','w',encoding='utf-8') as fp:
    fp.write(response.content.decode('utf-8'))

结果就不会出现这种问题了