Transfer-Encoding：chunked 返回数据过长导致中文乱码

最新推荐文章于 2023-05-11 15:58:38 发布
最新推荐文章于 2023-05-11 15:58:38 发布
阅读量658 收藏
点赞数
文章标签： json 网络 ui
原文链接：http://www.cnblogs.com/huilixieqi/p/9706221.html
版权
本文探讨了在HTTP响应中，当Transfer-Encoding设置为chunked且返回数据量大时，中文数据出现乱码的问题。分析了Content-Length与Transfer-Encoding的区别，以及Chrome浏览器对字符集处理的改变。提出了解决方案，即在返回JSON时明确指定字符集，以避免chunked编码导致的乱码问题。
摘要由CSDN通过智能技术生成

最近在写一个项目的后台时，前端请求指定资源后，返回JSON格式的数据，突然发现在返回的字节数过大时，最后的message中文数据乱码了，对于同一个接口的请求：当数据小时不会乱码，当数据量大了中文就乱码了。

基本的Controller代码如上，有的人也许一眼发现了问题所在，有人会质疑我的写法，但是在这里我想找的不是这个。

对于这个情况，在抓包后得到的状况如下：（记住大概你觉得陌生的地方，继续往下看）

这里写图片描述

这里写图片描述
可以明显的观察到，这里在中文乱码时出现了更多的TCP数据报。

这里写图片描述

这里写图片描述

最低0.47元/天 解锁文章
R15010198466
关注
python3爬虫乱码之请求头‘Accept-Encoding’：br 的问题
Beyond_F4的博客
03-11 2036
当用python3做爬虫的时候，一些网站为了防爬虫会设置一些检查机制，这时我们就需要添加请求头，伪装成浏览器正常访问。 header的内容在浏览器的开发者工具中便可看到，将这些信息添加到我们的爬虫代码中即可。 ‘Accept-Encoding’：是浏览器发给服务器,声明浏览器支持的编码类型。一般有gzip,deflate,br 等等。 python3中的 requests包中response...
python3爬虫中文乱码之请求头‘Accept-Encoding’：br 的问题
calm_peng
03-14 6969
当用python3做爬虫的时候，一些网站为了防爬虫会设置一些检查机制，这时我们就需要添加请求头，伪装成浏览器正常访问。 header的内容在浏览器的开发者工具中便可看到，将这些信息添加到我们的爬虫代码中即可。 ‘Accept-Encoding’：是浏览器发给服务器,声明浏览器支持的编码类型。一般有gzip,deflate,br 等等。 python3中的 requests包中response.te...
chunked返回获取response乱码_vue-router路由守卫--中（token获取和存储）
weixin_30951271的博客
12-28 279
前面我们已经对没有获取token的情况进行分析，接下来我们看看如何获取token，以及获取之后我们应该怎么处理。之前有提到，在用户登录成功之后，后台会存储token登录之后，不仅返回了token，还有username，这个我们后面也会用到。那么接下来我们应该把token和username存储起来，因为我们也需要vuex来存放状态，所以分别存在vuex中和cookie中。前面刚刚记录过vuex的使用...
Http 分块传输编码 Transfer-Encoding: chunked
joye123的博客
07-07 1696
定义 分块编码就是把报文分割为若干大小已知的块，一次发送到接收端。常见使用场景 长连接 发送时无法获取主体长度其他传输场景 1、非长连接 即发送完数据后就断开连接 接收端读取到EOF（-1）即读取完毕 2、长连接 固定主体长度，通过响应头中的Content-Length决定是否读取结束。
程序中中文乱码问题的总结
zj362421的博客
07-02 7165
java 程序中产生中文乱码问题的原因及相应的解决方法
.net 解析Transfer-Encoding:chunked 秒掉网上无用方案
huyingqi0418的博客
04-01 2000
昨天在爬数据时，发现某个网站Response.Get过来的数据一直是为空。当时就很奇怪，认真看下了响应头。发现Transfer-Encoding:chunked这个玩意 网上查了下资料 一般情况HTTP的Header包含Content-Length域来指明报文体的长度。 有时候服务生成HTTP回应是无法确定消息大小的，比如大文件的下载，或者后台需要复杂的逻辑才能全部处理页面的请求，这时用需要
微信小程序java中文乱码_如何解决微信小程序显示中文无法上传或者出现乱码的问题？...
weixin_34277051的博客
03-02 2524
今天小编给大家讲解如何解决微信小程序显示中文无法上传或者出现乱码的问题?有需要或者有兴趣的朋友们可以看一看下文，相信对大家会有所帮助的。在formData中对文字进行编码，使用encodeURI()wxml中例： 上网搜了很多：UrlEncode编码/UrlDecode解码使用方法UrlEncode编码主要用于将字符串以URL编码，返回一个字符串;使用方法：1、ASP中的用法：Server.URL...
网络爬虫--2.HTTP和HTTPS
fanxindong0620的博客
04-25 1303
文章目录一.简介二.HTTP的请求与响应三.客户端HTTP请求1.格式2.请求方法四.常用的请求报头1.Host (主机和端口号)2.Connection (链接类型)3.Upgrade-Insecure-Requests (升级为HTTPS请求)4. User-Agent (浏览器名称)5. Accept (传输文件类型)6.Referer (页面跳转处)7.Accept-Encoding（文件...
encoding python3_python3爬虫中文乱码之请求头‘Accept-Encoding’：br 的问题
weixin_39761491的博客
12-13 221
当用python3做爬虫的时候，一些网站为了防爬虫会设置一些检查机制，这时我们就需要添加请求头，伪装成浏览器正常访问。header的内容在浏览器的开发者工具中便可看到，将这些信息添加到我们的爬虫代码中即可。‘Accept-Encoding’：是浏览器发给服务器,声明浏览器支持的编码类型。一般有gzip,deflate,br 等等。python3中的 requests包中response.text ...
wireshark怎么用_天天用HTTP, 你确定你了解Content-Length和Transfer-Encoding 吗
weixin_39630441的博客
12-06 159
分享阿里 P8 高级架构师吐血总结的 《Java 核心知识体系&面试资料.pdf》据说是阿里 P8 级高级架构师吐血总结的一份 Java 核心知识.pdf, 内容覆盖很广，Java 核心基础、Java 多线程、高并发、Spring、微服务、Netty 与 RPC、Zookeeper、Kafka、RabbitMQ、Habase、设计模式、负载均衡、分布式缓存、Hadoop、Spark、Sto...
HTTP协议中的Tranfer-Encoding：chunked编码解析
牧码人的专栏
06-26 2443
 当不能预先确定报文体的长度时，不可能在头中包含Content-Length域来指明报文体长度，此时就需要通过Transfer-Encoding域来确定报文体长度。    通常情况下，Transfer-Encoding域的值应当为chunked,表明采用chunked编码方式来进行报文体的传输。chunked编码是HTTP/1.1 RFC里定义的一种编码方式，因此所有的HTTP/1.1应用都应当支
HTTP分块传输Transfer-Encoding:chunked
geekooler的博客
09-15 2581
HTTP长连接响应正常包含报头Content-Length，如Content-Length:1024，用于表示本报文的长度。 当返回的数据量比较大时，如果等待生成完数据再传输，效率会比较低下。相比而言，服务器更希望边生成数据边传输，这时可以在响应头加上以下字段标识分块传输 Transfer-Encoding:chunked 此时响应头不再包含Content-Length，客户端将以chunked的...
Transfer-Encoding: chunked添加Content-Length: 574712返回
一掬净土
09-05 3086
开发中有时候有的功能需要返回content-length字段，根据此字段进行下载进度的展示。而springboot默认在数据量大的时候是进行了设置的。需要我们手动对需要返回的接口进行filter配置。
分块传输编码
轩辕剑仙のBLOG
02-28 1160
转载地址:http://zh.wikipedia.org/wiki/%E5%88%86%E5%9D%97%E4%BC%A0%E8%BE%93%E7%BC%96%E7%A0%81 分块传输编码（Chunked transfer encoding）是超文本传输协议（HTTP）中的一种数据传输机制，允许HTTP由网页服务器发送给客户端应用（ 通常是网页浏览器）的数据可以分成多个部分。分块传
HTTP 1.1 中Transfer-Encoding chunked编码 | haohtml's blog
04-02 149
HTTP 1.1 中Transfer-Encoding chunked编码 | haohtml's blog HTTP 1.1 中Transfer-Encoding chunked编码 | haohtml's blog HTTP 1.1 中Transfer-E...
Http 响应头 Transfer-Encoding ： chunked 导致 浏览器客户端请求错误问题
qq_43750656的博客
05-11 3505
首先通过增加日志打印，排查方法的哪一步出现了问题，因为9200的tomcat服务器所有的静态资源是可以正常返回的，这排除了服务器问题，比较离奇的时候，所有的日志打印地方都可以正常输出，可以正常请求到sdd.com的结果，但是就是返回不了数据，这一步至少确定了 从9200发送sdd.com是没问题的。在cal.com上线后，用户发起请求，发现9200端口上的静态页面请求可以返回，而ajax请求数据无法返回，所有的ajax请求是做了代理的，代理到了sdd.com。这就导致匹配不起来了。
python requests接收chunked编码问题-python源码修改
weixin_34273479的博客
04-30 1335
python requests接收chunked编码问题-python源码修改 学习了：https://blog.csdn.net/wangzuxi/article/details/40377467  
web.py 返回 "Transfer-Encoding: chunked" 的处理
luchunpeng的博客
12-12 1401
最近在写一个微信公众号的小程序。微信公众平台推荐的服务端配置是python + web.py。调试时发现web.py（实际上是wsgiserver）响应我的POST请求时，HTTP Header里面总是"Transfer-Encoding: chunked"，而不返回“Content-Length”，而我的设备端程序处理是依赖于“Content-Length”。重写设备端程序太麻烦，怎样才能让它不
Transfer-Encoding: chunked
最新发布
06-10
Transfer-Encoding: chunked是HTTP协议中一种传输编码方式，常用于对响应数据进行分块传输。在使用chunked编码时，响应数据被划分为若干个等大小的块，每个块都带有自己的长度信息。传输时，先发送长度信息，然后再发送块数据。最后以一个长度为0的块作为结束标志。这种编码方式可以提高数据传输的效率，同时也允许服务器在产生响应时不必事先知道整个响应内容的长度。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值