在爬取动态网站并获取JSON数据时，可能会遇到返回数据乱码的情况。尝试设置响应编码为utf8，包括`response.encoding = 'utf8'`和`response.text.encode("utf8")`，但问题依然存在。当`response.json()`或`json.loads(response.text)`报错时，问题可能出在请求头的`Accept-Encoding`设置上。解决方案是删除或将其改为`'Accept-Encoding': 'utf-8'`，从而解决乱码问题。
我们有时候会爬取动态网站时候需要返回json数据例如这样的数据：
但是有时候返回的数据是乱码，比如这样的：
首先我们能够想到的是不是自己没有转为utf8
response.enconding = 'utf8'是把数据转为utf8格式的文本
response.text.encode("utf8")是把文本里的数据转为utf8
两种转换又先后之分，一种是在数据返回时就转为utf8，一种是数据返回文本后再转为utf8
经历这之后你发现还是返回的一串ASCLL
response.json()或者json.loads(response.text)会报错
那你就要看看是不是你的请求头出现了问题，我也是找了好久好久好久才找到问题所在
就是这个请求头的问题，去掉这个Accept-Encoding或者改为’Accept-Encoding‘：’utf-8‘。这样就完成了！！！
扫一扫
1924
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
