weixin_44845650的博客

在爬取数据时，遇到用requests解析到的内容与原网页内容不一致，且状态都为200.原网址内容如下：用requests解析到的内容如下：两者不一致，经过查询资料，得到解决方案如下：加一个headers即可那么headers中参数找法如下：检查要爬取网页，找到headers一栏，对应找取相应信息最终结果如下：大功告成！！！...

1、出现乱码情况2、出现乱码原因当Requests推测的文本编码与源网页编码 不一致时，会导致乱码问题的出现。r=requests.get(url,params=payload)print(r.encoding) #查看Requests推测的文本编码print(r.apparent_encoding) #查看源网页编码运行结果：ISO-8859-1utf-83、解决方法r=requests.get(url,params=payload)r.encoding="utf-8"p