Python requests 中文乱码问题解决方案

最新推荐文章于 2024-05-06 13:42:45 发布
最新推荐文章于 2024-05-06 13:42:45 发布
阅读量7.2k 收藏 7
点赞数 4
分类专栏： 接口请求 Python API 文章标签： python etl工程师
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42927927/article/details/123660199
版权

方案一：requests请求成功时，设置它的编码

注：前提是知道它的编码，一般通过鼠标右键网页就可以查看网页原代码

方案二：利用apparent_encoding

注：apparent_encoding本质上是requests本身对网页源码的猜测，如果猜不到，会返回None

方案三：先解成二进制，之后再转成想要的编码方式

 方案四：修改headers里的Accept-Encoding参数，如下：

 

加木
关注
  • 4
    点赞
  • 踩
  • 7
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
python中requests爬去网页内容出现乱码问题解决方法介绍
12-25
这篇博客要解决的问题是如何避免在使用requests的时候出现乱码。 import requests res=requests.get("https://www.baidu.com") print res.content 以上就是使用requests进行简单的网页请求数据的方式。但是很容易...
python requests 乱码_Python request中文乱码问题解决方案
weixin_39530833的博客
12-03 691
r = requests.get(“http://www.baidu.com“)**r.text返回的是Unicode型的数据。使用r.content返回的是bytes型的数据。也就是说，如果你想取文本，可以通过r.text。如果想取图片，文件，则可以通过r.content。**方法1：使用r.textRequests 会自动解码来自服务器的内容。大多数 unicode 字符集都能被无缝地解码。请...
python中——requests爬虫【中文乱码】的3种解决方法
LHJCSDNYL的博客
07-24 1万+
python中requests爬虫【中文乱码】问题，是最常遇到的问题，对于初学者来说，是很困恼的。本文将详细说明，python中使用requests库编写爬虫程序时，出现【中文乱码】的原因，及常见3种解决办法。
python系列：requests爬虫【中文乱码】的3种解决方法
最新发布
weixin_54626591的博客
05-06 489
requests爬虫【中文乱码】的3种解决方法
python+request响应结果中文乱码处理之encoding和apparent_encoding的区别和应用
weixin_45878889的博客
05-18 4546
一般在获取响应内容时，会出现响应结果乱码或者为ascii码，首先需要知道用的是那种编码方式，其次如何针对性去解码 encoding是从http的header中的charset字段中提取的编码方式，如果header中没有charst字段，则会默认为ISO-8859-1编码模式。则无法解析中文，所以会造成乱码 apparent_encoding是从网页的响应内容分析编码的方式，所有更加准确，当响应内容出现乱码时，可以把apparent_encoding的编码格式赋值给encoding 实例1： ``
requests爬虫【中文乱码】的3种解决方法
2301_77195717的博客
10-13 1103
使用requests库时，选择使用的文本响应方法不合适，以至于使用【requests.text】自动获取到的网页编码与实际网页的编码不一致，导致中文乱码。在这里请注意【requests.text】与【requests.content】最大的区别在于后者常用于图片和视频，且不会解码，直接以二进制形式返回。由于习惯，使用requests库时，常用【requests.text】进行文本响应，1.直接将requests.text换成requests.content。3.指定编码格式为UTF8。
Python requests乱码的五种解决办法
小龙在线
12-25 2万+
使用requests模块请求网页内容，经常会出现乱码，例如： import requests res = requests.get("https://www.baidu.com/") print(res.text) 乱码的原因是内容编码和解码方式不一致导致的，解决办法有以下几种解决办法： 第一种：apparent_encoding import requests res = requests.get("https://www.baidu.com/") res.encoding = res.apparen
Python request中文乱码问题解决方案
12-16
Python request获取网页中文乱码问题 r = requests.get(“http://www.baidu.com“) **r.text返回的是Unicode型的数据。 使用r.content返回的是bytes型的数据。 也就是说，如果你想取文本，可以通过r.text。 ...
Requests函数返回值乱码问题解决
weixin_41331069的博客
03-02 2092
解决Python返回值中文乱码问题的几种简单方法
Request获取请求数据中文乱码问题
HuanLe.的博客
11-17 7415
Tomcat在7以及更低版本时，解析中文的字符集默认为ISO-8859-1，并且是在底层写死的，所以浏览器发送Get请求或者时Post请求时，字符集格式不匹配，从而引发中文乱码。但是Tomcat更新到8版本后，默认字符集就更换为了UTF-8。
python中使用requests模块乱码的解决方法
m0_74459049的博客
05-07 2772
python中使用requests模块乱码的解决方法
【中文乱码】爬虫requests返回值中文乱码问题处理
宋建国的博客
01-03 2623
【代码】【中文乱码】爬虫requests返回值中文乱码问题处理。
python 编码(encoding和apparent_encoding)区别
xiaodeng2017的博客
05-20 4048
requests编码 属性 说明 r.encoding 从http header中提取响应内容编码 r.apparent_encoding 从内容中分析出的响应内容编码 encoding是从http中的header中的charset字段中提取的编码方式，若header中没有charset字段则默认为ISO-8859-1编码模式，则无法解析中文，这是乱码的原因。 apparent_encoding会从网页的内容中分析网页编码的方式，所以apparent_encoding比en
Python中requests请求的内容编码问题
mz02230909mz的博客
08-11 1098
问题： 用requests请求页面，用print(req.encoding)查看网页编码，有时候会显示：ISO-8859-1 原因： requests会从服务器返回的响应头的 Content-Type 去获取字符集编码，如果content-type有charset字段那么requests才能正确识别编码，否则就使用默认的 ISO-8859-1. 一般那些不规范的页面往往有这样的问题. 解决办法： response.encoding = response.apparent_encoding requests的
python 使用requests模块爬取数据时中文乱码问题
一些小问题
05-08 2772
目录 前言 重现问题 1.寻找目标 2.编写代码 解决问题 我喜欢的方式 尾声 前言 要想解决乱码问题得先知道我们获取的内容是什么格式的字符编码集 最常用的判断方式是查看网页源代码中的<meta charset="XXX"> 第二种方式是在浏览器开发者工具中的控制台中输入document.charset 即可显示出网页的编码格式 重现问题 1.寻找目标 我先找一个会乱码的网站，就以国家统计局吧，先找一个中文字比较多的吧 先查看网页源代码，可以大概判断出是..
解决Requests中文乱码
热门推荐
chaowanghn的博客
02-06 8万+
都在推荐用Requests库，而不是Urllib，但是读取网页的时候中文会出现乱码。分析： r = requests.get(“http://www.baidu.com“) **r.text返回的是Unicode型的数据。 使用r.content返回的是bytes型的数据。 也就是说，如果你想取文本，可以通过r.text。 如果想取图片，文件，则可以通过r.content。**获取一
解析Python requests响应内容编码规则
点工一枚
03-25 6739
1.发现问题 我们在使用requests发送请求时，响应的内容有时候会出现乱码的情况，下面我举一个例子： import requests r = requests.get('http://www.baidu.com') print(r.text) # 打印发现内容为乱码 我们可以使用r.encoding来查看编码解析text时我们的字符集编码是什么: print(r.encoding) 打印结果: 然后我们在通过r.text查看到HTML本身的字符集编码是utf-8,所以这里才会出现乱码的情况
python requests 中文乱码
09-19
python中使用requests库发送HTTP请求时，可能会遇到中文乱码的问题。中文乱码的出现原因一般是因为编码方式不匹配导致的。解决这个问题的方法有以下几种： 1. 使用response.content.decode()方法指定正确的编码方式进行解码，例如： ``` import requests res = requests.get("https://www.baidu.com/") try: txt = res.content.decode('gbk') # 先尝试使用gbk解码 except UnicodeDecodeError as e: txt = res.content.decode('utf-8') # 如果出错，则使用utf-8解码 print(txt) ``` 2. 使用response.text属性获取响应内容，并自动进行解码，例如： ``` import requests res = requests.get("https://www.baidu.com/") print(res.text) ``` 3. 如果以上方法都无效，可以尝试在发送请求时指定headers，通过修改"Accept-Encoding"和"User-Agent"字段来避免中文乱码问题，例如： ``` import requests headers = { 'Accept-Encoding': 'gzip, deflate, br', 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3' } res = requests.get("https://www.baidu.com/", headers=headers) print(res.text) ```

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值