python 微服务熔断工具_微服务的熔断原理与实现

熔断器实现

zRPC 中熔断器的实现参考了Google Sre 过载保护算法,该算法的原理如下:

请求数量 (requests):调用方发起请求的数量总和

请求接受数量 (accepts):被调用方正常处理的请求数量

在正常情况下,这两个值是相等的,随着被调用方服务出现异常开始拒绝请求,请求接受数量 (accepts) 的值开始逐渐小于请求数量 (requests),这个时候调用方可以继续发送请求,直到 requests = K * accepts,一旦超过这个限制,熔断器就回打开,新的请求会在本地以一定的概率被抛弃直接返回错误,概率的计算公式如下:

通过修改算法中的 K(倍值),可以调节熔断器的敏感度,当降低该倍值会使自适应熔断算法更敏感,当增加该倍值会使得自适应熔断算法降低敏感度,举例来说,假设将调用方的请求上限从 requests = 2 * acceptst 调整为 requests = 1.1 * accepts 那么就意味着调用方每十个请求之中就有一个请求会触发熔断

代码路径为 go-zero/core/breaker

type googleBreaker struct {

k float64 // 倍值 默认1.5

stat *collection.RollingWindow // 滑动时间窗口,用来对请求失败和成功计数

proba *mathx.Proba // 动态概率

}

自适应熔断算法实现

func (b *googleBreaker) accept() error {

accepts, total := b.history() // 请求接受数量和请求总量

weightedAccepts := b.k * float64(accepts)

// 计算丢弃请求概率

dropRatio := math.Max(0, (float64(total-protection)-weightedAccepts)/float64(total+1))

if dropRatio <= 0 {

return nil

}

// 动态判断是否触发熔断

if b.proba.TrueOnProba(dropRatio) {

return ErrServiceUnavailable

}

return nil

}

每次发起请求会调用 doReq 方法,在这个方法中首先通过 accept 效验是否触发熔断,acceptable 用来判断哪些 error 会计入失败计数,定义如下:

func Acceptable(err error) bool {

switch status.Code(err) {

case codes.DeadlineExceeded, codes.Internal, codes.Unavailable, codes.DataLoss: // 异常请求错误

return false

default:

return true

}

}

如果请求正常则通过 markSuccess 把请求数量和请求接受数量都加一,如果请求不正常则只有请求数量会加一

func (b *googleBreaker) doReq(req func() error, fallback func(err error) error, acceptable Acceptable) error {

// 判断是否触发熔断

if err := b.accept(); err != nil {

if fallback != nil {

return fallback(err)

} else {

return err

}

}

defer func() {

if e := recover(); e != nil {

b.markFailure()

panic(e)

}

}()

// 执行真正的调用

err := req()

// 正常请求计数

if acceptable(err) {

b.markSuccess()

} else {

// 异常请求计数

b.markFailure()

}

return err

}

总结

调用端可以通过熔断机制进行自我保护,防止调用下游服务出现异常,或者耗时过长影响调用端的业务逻辑,很多功能完整的微服务框架都会内置熔断器。其实,不仅微服务调用之间需要熔断器,在调用依赖资源的时候,比如 mysql、redis 等也可以引入熔断器的机制。

项目地址

https://github.com/tal-tech/go-zero

熔断器实现

https://github.com/tal-tech/go-zero/tree/master/core/breaker

微信交流群

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值