分布式进阶(二七)——分布式框架之高可用:Hystrix请求流程

作者简介:大家好,我是smart哥,前中兴通讯、美团架构师,现某互联网公司CTO

联系qq:184480602,加我进群,大家一起学习,一起进步,一起对抗互联网寒冬

学习必须往深处挖,挖的越深,基础越扎实!

阶段1、深入多线程

阶段2、深入多线程设计模式

阶段3、深入juc源码解析


阶段4、深入jdk其余源码解析


阶段5、深入jvm源码解析

码哥源码部分

码哥讲源码-原理源码篇【2024年最新大厂关于线程池使用的场景题】

码哥讲源码【炸雷啦!炸雷啦!黄光头他终于跑路啦!】

码哥讲源码-【jvm课程前置知识及c/c++调试环境搭建】

​​​​​​码哥讲源码-原理源码篇【揭秘join方法的唤醒本质上决定于jvm的底层析构函数】

码哥源码-原理源码篇【Doug Lea为什么要将成员变量赋值给局部变量后再操作?】

码哥讲源码【你水不是你的错,但是你胡说八道就是你不对了!】

码哥讲源码【谁再说Spring不支持多线程事务,你给我抽他!】

终结B站没人能讲清楚红黑树的历史,不服等你来踢馆!

打脸系列【020-3小时讲解MESI协议和volatile之间的关系,那些将x86下的验证结果当作最终结果的水货们请闭嘴】

通过前面一章的学习,我们已经了解了如何利用Hystrix来实现资源隔离,本章我将详细讲解一次请求调用在Hystrix底层的整个执行流程。

一、Command执行流程

我们来分析下下面这张图,它表述了一次Hystrix请求调用的完整底层逻辑:

1.1 创建请求

在Hystrix中,一个Command对象代表了对某个依赖服务的接口发起的一次请求,Command对象一共有两种:

  • HystrixCommand: 用于仅仅返回一个结果的调用
  • HystrixObservableCommand: 用于可能会返回多条结果的调用

1.2 请求调用

执行Command就可以发起一次对依赖服务接口的调用,一共有四个方法可以选择:execute()queue()observe()toObservable(),其中execute()和queue()仅仅对HystrixCommand适用:

  • execute(): 同步调用,直到接口返回结果,或者抛出异常:K value = command.execute();
  • queue(): 异步调用,返回一个Future,后面可以通过Future获取结果:Future<K> fValue = command.queue();
  • observe(): 订阅一个Observable对象,Observable代表的是依赖服务接口返回的结果,最终获取到的是代表结果的Observable对象的拷贝对象:Observable<K> ohValue = command.observe();
  • toObservable(): 返回一个Observable对象,如果我们订阅这个对象,就会执行command并且获取返回结果:Observable<K> ocValue = command.toObservable();

execute()实际上会调用queue().get().queue(),接着会调用toObservable().toBlocking().toFuture(),也就是说,无论是哪种执行command的方式,最终都是依赖toObservable()去执行的。

1.3 检查请求缓存

如果这个command开启了请求缓存(request cache),且这个调用的结果在缓存中存在,那么直接从缓存中返回结果。

1.4 检查断路器

检查这个command对应的依赖服务是否开启了断路器(circuit breaker),如果断路器被打开了,那么hystrix就不会执行这个command,而是直接去执行fallback降级机制。

1.5 检查资源池

如果command对应的线程池/Semaphore已经满了,那么也不会执行command,而是直接去调用fallback降级机制。

1.6 执行请求

调用HystrixCommand.run()HystrixObservableCommand.construct()来实际执行这个command,如果执行超时(timeout),那么command所在的线程就会抛出一个TimeoutException,此时会去执行fallback降级机制(执行出现异常也会执行fallback)。

1.7 健康检查

Hystrix会将对每一个依赖服务的调用事件(成功、失败、拒绝、超时等)发送给断路器(circuit breaker)。断路器就会对调用结果的次数进行统计,并根据这些统计次数来决定是否要进行断路。如果打开了断路器,那么在一段时间内就会直接断路,然后后续某次检查发现调用成功后,又会自动关闭断路器。

1.8 fallback降级

在以下几种情况中,hystrix会调用fallback降级机制:

  • 断路器处于打开状态,直接走降级流程;
  • 线程池/队列/semaphore满了,请求被reject;
  • 执行了请求,但是Command的run()或construct()方法抛出异常或超时;

一般在降级机制中,都建议给出一些默认的返回值,比如静态的一些代码逻辑,或者从内存中的缓存中提取一些数据,尽量在这里不要再进行网络请求了。即使在降级中,一定要进行网络调用,也应该将那个调用放在一个Command中,进行隔离。

二、请求缓存

Hystrix中有一个概念,叫做请求上下文(reqeust context)。通俗点讲,请求上下文就是用于保存一次用户请求的信息。通常一次请求可能涉及对多个依赖服务的调用,某些服务的接口还可能会调用好几次,这样在一次请求上下文中,如果有多个command接口/参数都是一样的,那么可以认为其结果也是一样的。

此时,就可以将第一次command执行后,返回的结果缓存在这个请求上下文中,后续的其它对这个依赖的调用全部从内存中取用缓存结果就可以了,不用在一次请求上下文中反复多次执行一样的command,提升整个请求的性能。

HystrixCommandHystrixObservableCommand都可以指定一个缓存key,然后hystrix会自动进行缓存,接着在同一个request context内,再次访问的时候,就会直接取用缓存。

我们继续以整合服务为例子,看下请求缓存的使用。

2.1 创建HystrixRequestContext

首先,针对每一个请求,我们需要创建一个HystrixRequestContext,可以在web容器的Filter里面实现:

    public class HystrixRequestContextServletFilter implements Filter {
    
        public void doFilter(ServletRequest request, ServletResponse response, FilterChain chain) 
         throws IOException, ServletException {
            // 创建一个reqeust context对象
            HystrixRequestContext context = HystrixRequestContext.initializeContext();
            try {
                chain.doFilter(request, response);
            } finally {
                // 关闭request context
                context.shutdown();
            }
        }
    }

注意要在Spring容器中注入HystrixRequestContextServletFilter对象。

2.2 改写商品批量查询接口

之前整合服务中的商品批量查询接口,如果商品id出现了重复,按照我们之前的业务逻辑,可能就会对重复的productId的商品查询多次。我们可以利用request cache做下优化,一次请求,就是一次request context,对相同的商品查询只能执行一次,其余的都走request cache。

    /**
     * 封装获取商品信息的请求,采用线程池隔离。
     * HystrixCommand中的泛型是请求返回的类型,此处是商品信息ProductInfo
     */
    public class GetProductInfoCommand extends HystrixCommand<ProductInfo> {
    
        private final Long productId;
    
        public GetProductInfoCommand(Long productId) {
            // 将command与线程池关联
            super(HystrixCommandGroupKey.Factory.asKey("GetProductInfoCommandGroup"));
            this.productId = productId;
        }
    
        /**
          * run方法里执行的是真正请求处理逻辑
          */
        @Override
        protected ProductInfo run() {
            // 拿到一个商品id
            // 调用商品服务的接口,获取商品id对应的商品的最新数据
            // 用HttpClient去调用商品服务的http接口
            String url = "http://127.0.0.1:8082/getProductInfo?productId=" + productId;
            String response = HttpClientUtils.sendGetRequest(url);
    
            return JSONObject.parseObject(response, ProductInfo.class);
        }
    
        /**
          * 指定缓存key。
          * 每次接口调用结果都会用这个key保存到内存中:<key,结果>
          */
        @Override
        protected String getCacheKey() {
            return "product_info_" + productId;
        }
    
    }

上述代码的关键就是覆写了HystrixCommand.getCacheKey方法,根据商品ID先去缓存中查找是否有结果,有的话直接返回。

三、总结

本章,我讲解了Hystrix中一个请求的整体执行流程,并对请求缓存进行了讲解,重点是Command执行流程。后续章节我将针对请求流程中的各个部分进行专门讲解,包括断路器、降级等。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值