requests请求返回内容 中文乱码问题

最新推荐文章于 2025-10-31 22:40:25 发布
原创 最新推荐文章于 2025-10-31 22:40:25 发布 · 2.9w 阅读 · 50 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#相应中文乱码 #requests中文乱码 #请求返回的内容中文乱码 #response.text出现中文乱码 #爬虫requests出现中文乱码

本文讲解了使用Python的Requests库时遇到中文乱码的问题及解决方法。主要原因是requests默认使用iso-8859-1编码，而部分网站如国家统计局未指定编码。通过手动设置或使用apparent_encoding可解决乱码，同时介绍了已爬取的含u5430字符串转换为正常中文的方法。
部署运行你感兴趣的模型镜像

1.为什么有时候request会出现请求的内容中文乱码

以国家统计局的[http://www.stats.gov.cn/tjsj/tjbz/tjyqhdmhcxhfdm/2016/]为例，开发者模式打开可以看到 Conten-Type没有指定默认的编码。 而requests使用get请求时候，response默认使用iso-8859-1编码对消息体进行编码，传送数据给客户端。
（大部分网页是有指定编码的）。
在这里插入图片描述

2. 解决方法

1.自行设置

查看该网页的网页源代码，还以上面国家统计局的连接为例，搜索charset的编码。然后在代码中指定它的编码格式，重新打印相应内容的text，这次中文就不会乱码问题了。
在这里插入图片描述

res = requests.get(url, headers = header)
res.encoding = ‘gb2312’
pritn(res.text)

2.利用apparent_encoding

res = requests.get(url, headers = header)
res.encoding = res.apparent_encoding
pritn(res.text)

3. 已经爬好的带有\u5430的字符串怎么转为正常的中文显示字符串

python3: 字符串.encode(‘utf-8’).decode(‘unicode_escape’)

您可能感兴趣的与本文相关的镜像

Python3.9

Python3.9

Conda
Python

Python 是一种高级、解释型、通用的编程语言，以其简洁易读的语法而闻名，适用于广泛的应用，包括Web开发、数据分析、人工智能和自动化脚本

记一次requests.get()返回数据乱码问题
weixin_42551921的博客
05-13 1513
搜索发现：造成乱码除了编码格式方面外，另外还有可能是因为压缩格式导致的。在请求头中，‘Accept-Encoding’是浏览器发给服务器，声明浏览器支持的编码类，一般有gzip,deflate,br 等等。很多网站都是以gzip的格式来输出页面，此时输出response.content和response.text时会自动解压，但是当以br格式压缩时，却不会自动解压；Brotli是一种由 Google开发的全新压缩算法,可以有效减小传输内容大小，加速分发效果。
【中文乱码】爬虫requests返回值中文乱码问题处理
宋建国的博客
01-03 2869
【代码】【中文乱码】爬虫requests返回值中文乱码问题处理。
Python requests详解：从入门到实战，HTTP请求的“瑞士军刀”
最新发布
qq2745567641的博客
10-31 866
Python的requests库是一个简洁强大的HTTP请求工具，适用于爬虫、API调用等场景。相比urllib，它简化了请求流程，自动处理编码、JSON解析等细节，支持GET、POST等方法。通过params传递URL参数，用data或json提交表单/JSON数据，还能设置请求头、Cookies、超时等。其直观API和丰富功能让开发者能轻松应对各类HTTP请求任务，成为Python网络请求的首选库。
request请求返回的内容乱码
weixin_42039715的博客
10-30 2792
request请求返回的内容乱码 问题： r = requests.get() 通过r.text得到的响应数据是乱码 原因： r.text解码类型： 1）根据响应头的编码 Content-Type字段charset 推测 响应的文本编码 2）如果HTTP响应中Content-Type字段没有指定charset，则默认页面是'ISO-8859-1'编码，这种解码方式在解析中文的时候就会出现乱码 这里就是因为响应头未指定charset，导致出现乱码 解决方式： r.apparent_encoding：根据响应的
Python requests返回页面出现中文乱码问题
qq_37566910的博客
11-09 2009
解决办法:https://www.cnblogs.com/bw13/p/6549248.html
http request乱码的真相
热门推荐
横云断岭的专栏
12-01 3万+
当然，终极原因http协议里没有规定request一定要指定编码，导致浏览器，web服务器都各搞一套…… 下面一一理清。 首先，从浏览器端看下有多少种情况： 1.在浏览器的地址栏，或者搜索框里输入地址：http://www.test.com/衣服/search?keyword=T恤  2.在一个指定了编码的网页中，提交一个form，如： 你好 搜索 当然还有
Requests函数返回值乱码问题解决
花花彩虹糖
03-02 2558
解决Python返回值中文乱码问题的几种简单方法
解决python3中的requests解析中文页面出现乱码问题
09-19
在Python 3中，使用requests库进行HTTP请求时，可能会遇到中文页面乱码的问题。这是因为requests库在处理HTTP响应时，默认会尝试猜测响应内容的字符编码（通过`response.encoding`属性），但这种猜测并不总是准确，...
python中requests爬去网页内容出现乱码问题解决方法介绍
09-21
然而，在使用`requests`获取网页内容时，常常会遇到乱码问题，尤其是对于非UTF-8编码的网页。本文将详细探讨如何解决Python `requests`爬取网页内容时出现的乱码问题。 首先，我们需要了解`requests`的基本用法。当...
解决java的http请求库dongliu.requests请求结果中文乱码的问题
通往体面生活的路上
07-26 912
前言 在前几天接到一个需求，需要爬取某个网站上的一些数据，并且经过整理后将爬取到的数据写入到数据库内。 这类需求如果不需要考虑太多性能的问题的话，使用 Python 来实现的效率是最高的，但考虑到后续可能需要作为模块整合至springboot 的应用内，所以还是决定使用 java 的库来进行开发。 在这之前了解到并且使用的 java 的 http 库都是 okhttp 、httpclient、RestTemplate 等，虽然这些库也简化了很多原生求的复杂配置过程，但对于一些需求还是需要自行去封装，操作体验
requests返回值乱码_python --- request返回值乱码问题
weixin_39633976的博客
01-14 1634
1、分析a)《HTTP权威指南》里第16章国际化里提到，如果HTTP响应中Content-Type字段没有指定charset，则默认页面是'ISO-8859-1'编码。一般现在页面编码都直接在html页面中这处理英文页面当然没有问题，但是中文页面，就会有乱码了！b)分析requests的源代码发现，content是urllib3读取回来的原始字节码，而text不过是尝试对content通过编码方式...
request返回的文本乱码
m0_37471413的博客
08-20 841
一个简单的代码返回的res.text是乱码，如图：反复补全header里面的参数，也无济于事。百思不得其解。path=/;HttpOnly;服务器返回的响应体（response body）内容，而是经过的二进制数据。当你直接访问 res.text 时，requests 库会尝试将这些原始的、压缩过的二进制数据当作文本来解码（根据 Content-Type 里的 charset=utf-8），这就像用记事本去打开一个 ZIP 压缩包一样，结果自然是一堆无法识别的乱码。
python requests请求得到乱码解决方法
return_rebound的博客
07-12 1749
python requests请求得到乱码解决方法
request/response中文乱码
W13979的博客
11-07 619
Request中文乱码问题以及解决方案 补充三个知识点： Get是URL解码方式。默认解码格式是Tomcat编码格式。所以URL解码是UTF-8，覆盖掉了request容器解码格式 Post是实体内容解码方式。默认解码格式是request编码格式也是UTF-8。与Tomcat编码格式无关 解决request乱码问题是在代码中用System.out.println(request.getCharacterEncoding());看看接收过来的request是用什么方式编码的。我的编码方式是UTF-8，所.
python requests返回中文乱码
weixin_30628077的博客
09-20 1295
　　最近在使用python爬取高考分数线时，获得的response里面输出了中文乱码： from bs4 import BeautifulSoup import requests def get_provice_link(url): response=requests.get(url) print(response.text) soup=Beauti...
request请求结果乱码，设置了encoding返回结果仍然是乱码的解决
qq_43704548的博客
07-16 642
问题描述：本次遇见了一个奇怪的网站，是get请求，无加密，响应状态码200，常规的请求结果出现乱码应该可以通过设置encoding='utf-8’或者’gbk’实现正常显示，但是本次请求结果设置了也还是乱码，推测或许是请求头参数的原因，按照浏览器的请求头添加参数后还是异常。根据浏览器的请求我们可以推测是因为Accept-Encoding的原因，",这样返回结果就是正常的了。
使用requests进行网络请求，返回信息是乱码
shashouleilei的博客
09-28 1225
报错：UnicodeDecodeError: ‘utf-8’ codec can’t decode byte 0x83 in position 0: invalid start byte 问题：使用requests进行网络请求，返回信息使用decode进行各种解码，但是无法成功。 测试：然后使用fiddler进行代理，返回信息正确。 原因：不详 做法：使用requests进行本地fiddler代理 ip = '127.0.0.1:8888' proxies = { "http": "
Requests出现乱码，一次解决！
AI悦创·编程私教1v1
08-17 1151
1-Note Book 你好，我是悦创。 回顾一下爬虫的小基础小知识点。 1. Python 爬虫基础 1.1 Web 基础概念 写爬虫必须弄懂的问题： 从输入网址到看到网页，都发生了什么？ 这个问题是个经典问题，如果你去面试一些公司的时候涉及到一些网站开发也好，爬虫也好，反正跟网络相关的他肯定都会问这个问题。弄清这个过程是至关重要的。 URL 的概念 统一资源定位符：Uniform Resource Locator 这个也是需要我们搞清楚的，我们了解的。因为，我们一般需要抓取网页之后又要再次
解决requests请求乱码
weixin_46043193的博客
08-06 387
解决requests请求乱码 在requests请求获取数据 有些 数据 utf-8 解析 编码有问题，在python3 默认utf-8,这时候就要将默认的定义成其他格式进行解析 . 2.这种情况定义默认编码格式， import io import sys import requests sys.stdout = io.TextIOWrapper(sys.stdout.buffer, encoding='gb18030') #定义初始编码格式 url ='' response = reques
requests发送请求到表单中文乱码
06-26
在使用 `requests` 库发送 POST 请求提交表单数据时，如果遇到中文乱码问题，通常是因为编码或解码设置不当。以下是几种有效的解决方案： ### 1. 指定响应内容的编码格式 当服务器返回的内容包含中文字符时，可以通过手动指定响应内容的编码格式来避免乱码。例如，可以将响应对象的 `encoding` 属性设置为 `'utf-8'` 或其他合适的编码格式： ```python import requests response = requests.post('http://example.com', data={'key': '中文'}) response.encoding = 'utf-8' print(response.text) ``` ### 2. 使用 `json.dumps` 转换数据 在发送 POST 请求时，可以将表单数据转换为 JSON 字符串，并通过设置请求头中的 `Content-Type` 为 `application/json` 来确保数据正确传输： ```python import requests import json data = {'say': '你好'} response = requests.post('http://example.com', headers={'Content-Type': 'application/json'}, data=json.dumps(data)) print(response.text) ``` ### 3. 对表单数据进行 URL 编码 在发送 POST 请求时，确保表单数据经过 URL 编码，这可以通过 `requests` 库自动处理。只需将数据作为字典传递给 `data` 参数，库会自动进行编码： ```python import requests data = {'key': '中文'} response = requests.post('http://example.com', data=data) print(response.text) ``` ### 4. 设置服务器端编码 确保服务器端能够正确处理 UTF-8 编码的请求。对于 Spring MVC 应用，可以在 `web.xml` 中配置过滤器以设置请求编码： ```xml <filter> <filter-name>CharacterEncodingFilter</filter-name> <filter-class>org.springframework.web.filter.CharacterEncodingFilter</filter-class> <init-param> <param-name>encoding</param-name> <param-value>UTF-8</param-value> </init-param> <init-param> <param-name>forceEncoding</param-name> <param-value>true</param-value> </init-param> </filter> <filter-mapping> <filter-name>CharacterEncodingFilter</filter-name> <url-pattern>/*</url-pattern> </filter-mapping> ``` ### 5. 客户端和服务器端一致性 确保客户端和服务器端都使用相同的编码格式（如 UTF-8），以避免因编码不一致导致的乱码问题。
评论 3
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值