grpc-go 代码阅读笔记（二）：流量控制

最新推荐文章于 2024-04-03 17:17:42 发布
最新推荐文章于 2024-04-03 17:17:42 发布
阅读量962 收藏
点赞数
分类专栏： 源代码分析 文章标签： gRPC gRPC-go 流量控制 源代码分析 网络库算法
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u013272009/article/details/109558139
版权
本文深入探讨了gRPC-go的流量控制机制，包括流控窗口算法和自适应增长策略。流量控制确保在同一连接上的多个流不会相互干扰，采用http/2的WINDOW_UPDATE帧进行管理。gRPC-go初始窗口大小为65535，当带宽充足时，窗口可自适应增长至16M。文章还提到了bdp估算和ping机制，并指出了相关代码文件供读者进一步研究。
摘要由CSDN通过智能技术生成

流量控制（ Flow Control ）

流量控制，是为了能更好更有效率的利用网络带宽

因为现实需求的复杂性，导致每个网络库根据自身侧重要解决的问题，都会有独特的流量控制算法

比如 TCP 有用于流量控制的 RTT 算法、滑动窗口、拥塞窗口以及相关配套的重传机制

而 KCP 为了让数据包更快的到达对端，相关处理与 TCP 就不尽相同

它是允许滑动窗口中有镂空的（用于快速重传）；并允许关闭拥塞窗口； RTT 算法也不一样；重传算法也更丰富

还有不少网络库，如谷歌的 QUIC ，BBR 算法等，都是为了解决 TCP 流量控制算法在现代网络应用中暴露出来的缺陷

本文介绍 gRPC-go 中的流量控制相关算法与源码

gRPC-go 的流量控制

gRPC-go 在 TCP 连接之上，使用流实现多路复用会引入一些冲突，这导致有阻塞的流

gRPC-go 的流量控制确保相同连接上的流不会破坏性的相互干扰

gRPC-go 整个连接与独立的流，都可以使用流量控制

它通过使用 http/2 的 WINDOW_UPDATE 帧来提供流量控制

了解本专栏 订阅专栏 解锁全文 超级会员免费看
fananchong2
关注
专栏目录
订阅专栏
30. 【gRPC系列学习】流量控制
菜鸟的博客
12-24 1229
gRPC流量控制
【mediasoup-sfu-cpp】0：学习笔记：闫华：c++ mediasoup设计与实现
突围
01-06 1348
https://sh2022.livevideostack.cn/live/4987
GRPC中的流量控制
日积月累
01-10 1900
https://segmentfault.com/a/1190000015232494?utm_source=channel-hottest
gRPC运行过程与流量控制机制
m0_60647847的博客
10-05 1738
总结一下，上面讲解了gRPC中三种流量控制（注意当前版本是v1.49.0），分别为BDP、connection level 、 sream level 流量控制。按照层次关系，先从整体的BDP介绍了原理与结构，然后顺着思路，从“唯一的TCP连接”引入了connection level流量控制，最后讲解最细粒度的stream level流量控制，并且，通过gRPC的源代码步骤，从连接建立到交互完成，我们过了一遍关键的源码，在源码中看流量控制机制的过程。
go语言 之 流量控制
u013028395的博客
12-29 490
例如：如果我们要原子的将int32类型的变量i32的值减小3话，可以这样操作：atomic.AddInt32(&i32, -3)1，首先介绍一下 “sync/atomic” 包下面的AddUint32() 函数。解释：函数用于将新值自动存储到* addr中，并返回先前的* addr值。它将新的int32值存储到* addr中，并返回先前的* addr值。方法解释：原子的把将增量自动添加到* addr中并返回改地址上新的值。返回true，则截取流量，返回false则放过。2，实现一个流量控制类。
gRPC源码/transport/流控
weixin_33912453的博客
06-08 335
流控 代码 https://github.com/messixukej... 在liangzhiyang/annotate-grpc-go基础上补充了部分注释 发送流控 HTTP/2 流量控制的目标，在流量窗口初始值的约束下，给予接收端以全权，控制当下想要接受的流量大小。 算法： 两端(收发)保有一个流量控制窗口(window)初始值...
Go语言分布式系统学习笔记：涵盖CGO、汇编、RPC与Web开发
深入到控制流、函数的再次讨论，展示了汇编语言的强大功能，并通过GoroutineID的例子说明了其在Go语言中的应用。此外，还介绍了如何使用Delve调试器进行程序调试。 4. RPC和Protobuf章节，首先介绍了RPC（远程过程...
Golang笔记
怨行客
10-18 539
协程是用户态轻量级线程协程是线程调度的基本单位通常在函数前加上go关键字就能实现并发。一个Goroutine会以一个很小的栈启动2KB或4KB，当遇到栈空间不足时，栈会自动伸缩， 因此可以轻易实现成千上万个goroutine同时启动。
go学习资料以及开源代码
开发之路
01-19 1874
Go 语言方面的大牛，或者优秀 Go 项目的组织 mattn- 写了数百个 Go 项目，盛产优质项目 Unknwon- gogs/macaron 等项目作者，《The Way to Go》译者 Jinzhu- gorm/QOR 等作者 valyala- fasthttp/fastjson 等作者 vmihailenco- go-redis/go-pg 等作者 k...
go-tc:纯粹的流量控制-它允许读取和更改队列，过滤器和类
04-17
tc 这是tc正在进行中的版本。 它为基于的提供了无绑定的API。 例子 func main () { // open a rtnetlink socket rtnl , err := tc . Open ( & tc. Config {}) if err != nil { fmt . Fprintf ( os . Stderr , "could not open rtnetlink socket: %v \n " , err ) return } defer func () { if err := rtnl . Close (); err != nil { fmt . Fprintf ( os . Stderr , "could not close rtnetlink socket: %v \n " , err ) } }() // get a
gRPC课程
02-20
gRPC课程
leafltd：leafltd简介leafltd是Golang语言社区的项目集合控制项目，其中包含：leaf社区版本，帧同步游戏服务器，H5游戏服务器，KCP，gRPC项目等
02-04
Leafltd 字节教育授权Golang语言社区启动的社区项目托管，主要是社区的开源项目及预更新的数据的内容等；同时字节教育也开始了共开课的网络授课。 微信订阅号：Golang语言社区。微信服务号：Golang技术社区。关注或了解更多的Go语言技术教程及课程活动。问题或建议，请公众号留言; 课程说明 面向零基础学者，希望更多喜欢Go语言的同学及想军队Go语言开发游戏服务器的同学一个方向的指引 课程多维度教学，基础课程，进阶课程，提高课程，lollipopGo游戏框架实战课程等等 同时我们的免费课程同时持续更新中;点击访问： :copyright:贝游特教育（ ）
golang流量控制
qq_30505673的博客
07-13 792
package main import "time" import ( "github.com/golang/glog" ) func main() { //requests := make(chan int, 5) //for i := 1; i <= 5; i++ { // requests <- i //} //close(requests) // //limiter := time.Tick(200 * time.Millisecond) // //for re
go使用channei实现流量控制显示流量控制
qq_35857939的博客
12-12 599
利用go channel实现限流量控制，原理：设置一个缓冲通道，设置访问中间键，当用户请求连接时判断channel里面长度是不是大于设定的缓冲值，如果没有就存入一个值进入channel，如果大于缓冲值，channel自动阻塞。当用户请求结束的时候，取出channel里面的值。 如果想限制用户HTTP请求进行速率限制可以参考 https://github.com/didip/tollbooth 这个...
6、RPC框架解析：gRPC限流
ldaysjun的博客
09-09 648
​ 在流量突增的情况下，为了保证服务的可用性，能做些什么呢？例如活动运营平台，平时流量不是很多，3台机器就可以解决。但是突然上线了一个奖励非常大的奖品，3台服务均到达高负载的状态，直接造成雪崩效应，应对这种突发流量，为了保证服务的可用性，引入一个新的概念，服务限流。​ 开源的限流组件有很多，重要的是了解他们的实现原理，以及各个算法的应用场景，例如：计数器就适合在集群的场景下使用，配合滑动窗口，令牌通和漏斗提供了比较精准的限流策略，漏斗是让服务以恒定速率处理请求，但是令牌通算法是允许一定程度的流量突发。
grpc-go源码剖析四十三之服务器端将接收到的数据帧缓存到recvBuffer前，抽样级别流控原理介绍
码二哥的技术池
08-04 408
本篇文章要介绍的场景是，服务器端接收到客户端发送的数据帧后，是需要对数据帧进行维护的，如将数据帧存储起来，那么在存储起来的前期，可以进行流量控制的； 本小节主要是分析数据帧存储前的流量控制原理； 主要分为3种类型控制： 抽样级别流控 链接级别流控 流级别流控 1、抽样级别流控概述 抽样级别流控： 指的是grpc-go/internal/transport/bdp_estimator.go文件中的bdpEstimator结构体；服务器端 服务器接收到客户端发送的数据帧后，会给客户端发送一个ping帧，客
Golang高效流控实践
残星说梦话
03-16 1154
你好，我是俞凡，在Motorola做过研发，现在在Mavenir做技术工作，对通信、网络、后端架构、云原生、DevOps、CICD、区块链、AI等技术始终保持着浓厚的兴趣，平时喜欢阅读、思考，相信持续学习、终身成长，欢迎一起交流学习。例如，如果流控设置为每分钟 100 个请求，则系统在任何给定的 60 秒窗口内最多允许 100 个请求，超过此限制的请求将被拒绝或延迟到下一个时间窗口。流控对于构建高可靠弹性系统至关重要，本文介绍了Golang内置的流控组件，通过该组件就可以打造适合各种业务场景的流控系统。
GRPC流量拦截与识别研究
SHELLCODE_8BIT的博客
09-21 182
2.了解如何拦截grpc流量。1.了解grpc流量。
[每周一更]-(第92期)：Go项目中的限流算法
最新发布
hmx224_2014的专栏
04-03 1508
很多业务会有限流的场景，比如活动秒杀、社区搜索查询、社区留言功能；保护自身系统和下游系统不被巨型流量冲垮等。在计算机网络中，限流就是控制网络接口发送或接收请求的速率，它可防止DoS攻击和限制Web爬虫。限流，也称流量控制。是指系统在面临高并发，或者的情况下，，从而。限流会导致部分用户请求处理不及时或者被拒，这就影响了用户体验。所以一般需要在系统稳定和用户体验之间一下。
io.grpc:protoc-gen-grpc-java:1.0.0:exe:${os.detected.classifier}
07-23
`io.grpc:protoc-gen-grpc-java:1.0.0:exe:${os.detected.classifier}` 是一个 Maven 坐标，用于使用 gRPC 的 Protocol Buffers 编译器插件来生成 gRPC 相关的 Java 代码。 这个坐标指定了以下部分： - `io.grpc` 是 Maven 组织 ID，表示该插件是由 gRPC 提供的。 - `protoc-gen-grpc-java` 是插件的名称，用于生成 gRPC 相关的 Java 代码。 - `1.0.0` 是插件的版本号，表示要使用的插件版本。 - `exe:${os.detected.classifier}` 指定了插件的文件类型和操作系统相关的后缀。 `${os.detected.classifier}` 是一个 Maven 变量，用于根据操作系统自动选择相应的插件文件。它会根据当前操作系统选择适当的文件后缀，例如在 Windows 上是 `.exe`，在 Linux 上是 `.linux-x86_64`。 通过在 Maven 项目的 `pom.xml` 文件中添加该依赖项，您可以在构建过程中自动下载并使用该插件来生成 gRPC 的 Java 代码。例如： ```xml <plugins> <plugin> <groupId>org.xolstice.maven.plugins</groupId> <artifactId>protobuf-maven-plugin</artifactId> <version>0.6.1</version> <configuration> <protocArtifact>com.google.protobuf:protoc:3.17.3:exe:${os.detected.classifier}</protocArtifact> <pluginId>grpc-java</pluginId> <pluginArtifact>io.grpc:protoc-gen-grpc-java:1.0.0:exe:${os.detected.classifier}</pluginArtifact> </configuration> <executions> <execution> <goals> <goal>compile</goal> <goal>compile-custom</goal> </goals> </execution> </executions> </plugin> </plugins> ``` 这样配置后，您可以使用 `mvn compile` 命令来自动生成 gRPC 的 Java 代码。生成的代码将位于 `target/generated-sources/protobuf` 目录下。 请确保您的 Maven 项目中已经包含了正确的依赖项，并且配置文件中的版本号与您所需的版本一致。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

fananchong2

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值