Springcloud-Hystrix
前言
目前Hystrix也已经进入到维护阶段(不再更新),当前国内主流的服务降级组件使用的是SpringcloudAlibaba的 sentinel,但Hystrix的设计理念和基本使用还是得掌握,有助于后面学习sentinel。
概述
在分布式系统架构中,一个复杂的分布式体系结构中可能会有几十个服务,而在几十个服务中可能又会存在多个调用关系,那此时就有可能会出现一个问题:
如果服务调用链上的某一个节点出现故障后,比如说宕机了,那么此时该节点的响应时间就会过长或者不可用,那对该节点的调用就会占用越来越多的系统资源,进而引起系统崩溃。比如有当前服务一共有调用链A调用B,B调用C,C调用D,那如果此时D节点宕机了,那么D无法响应C,C也就无法响应B…进而造成系统崩溃。那么也就是我们所说的服务雪崩问题。
对于高流量的应用来说,单一的后端依赖可能会导致所有服务器上的所有资源都在几秒钟内饱和。比失败更糟糕的是,这些应用程序还可能导致服务之间的延迟增加,备份队列,线程和其他系统资源紧张,导致整个系统发生更多的级联故障。这些都表示需要对故障和延迟进行隔离和管理,以便单个依赖关系的失败,不能取消整个应用程序或系统。
那么,针对服务雪崩问题,我们就引出了 服务降级和服务熔断 的概念。
服务降级(fallback)
当服务器因为某些原因无法响应消费端的调用,不让消费端等待而是返回一个兜底的处理结果(消息提示)
哪些情况会触发服务降级
- 程序运行异常
- 超时
- 服务熔断触发
- 线程池/信号量打满也会导致服务降级
使用Hystrix完成服务降级
使用步骤
-
在服务提供端的主启动类上添加激活注解
@SpringBootApplication @EnableEurekaClient @EnableCircuitBreaker //激活服务熔断 public class PaymentHystrixMain8001 { public static void main(String[] args) { SpringApplication.run(PaymentHystrixMain8001.class, args); } }
-
在业务类编写服务降级的兜底方法
@Service public class PaymentService { /** * 正常访问,一切OK * @param id * @return */ public String paymentInfo_OK(Integer id) { return "线程池:"+Thread.currentThread().getName()+"paymentInfo_OK,id: "+id+"\t"+"O(∩_∩)O"; } /** * 超时访问,演示降级 * @param id * @return */ //1. @HystrixCommand注解用于一旦调用该服务方法失败并抛出异常信息后, // 会自动调用fallbackMethod指定的方法来完成兜底 //2. commandProperties = { // @HystrixProperty(name = "execution.isolation.thread.timeoutInMilliseconds", value = "3000") // } 用于设置自身调用超时峰值,峰值内可以正常运行;如果超过了指定的值,就会触发服务降级,也就是会调用兜底的方法 @HystrixCommand(fallbackMethod = "paymentInfo_TimeOutHandler", commandProperties = { @HystrixProperty(name = "execution.isolation.thread.timeoutInMilliseconds", value = "5000") }) public String paymentInfo_TimeOut(Integer id) { //int a = 10 / 0; try { TimeUnit.MILLISECONDS.sleep(3000); } catch (InterruptedException e) { e.printStackTrace(); } return "线程池:"+Thread.currentThread().getName()+"paymentInfo_TimeOut,id: "+id+"\t"+"O(∩_∩)O,耗费3秒"; } //兜底方法 public String paymentInfo_TimeOutHandler(Integer id) { return "线程池:"+Thread.currentThread().getName()+"8001系统繁忙或运行出错,id: "+id+"\t"+"O(出错了)O"; } }
-
在服务端yml中开启对Hytrix的支持
feign: hystrix: enabled: true
-
在消费端添加激活注解
@SpringBootApplication @EnableFeignClients @EnableHystrix //激活hystrix public class OrderHystixMain80 { public static void main(String[] args) { SpringApplication.run(OrderHystixMain80.class, args); } }
-
在Controller层上开启Hyrix
@RestController @RequestMapping("/order") @Slf4j public class OrderHystrixController { @Autowired private PaymentHystrixService paymentHystrixService; @GetMapping("/consumer/payment/hystrix/ok/{id}") public String paymentInfo_OK(@PathVariable("id") Integer id) { String result = paymentHystrixService.paymentInfo_OK(id); return result; } @GetMapping("/consumer/payment/hystrix/timeout/{id}") //开启hystrix @HystrixCommand(fallbackMethod = "paymentInfo_TIMEOUTHANDLER", commandProperties = { @HystrixProperty(name = "execution.isolation.thread.timeoutInMilliseconds", value = "1500") }) public String paymentInfo_TIMEOUT(@PathVariable("id") Integer id) { String result = paymentHystrixService.paymentInfo_TimeOut(id); return result; } //兜底方法 public String paymentInfo_TIMEOUTHANDLER(@PathVariable("id") Integer id) { return "我是消费者80,对方支付系统繁忙请10秒钟后再试或者自己运行出错请检查自己,o(╥﹏╥)o"; } }
存在的问题
通过上面的配置我们就已经成功地通过Hystrix实现了服务降级功能,但以上这种实现方式其实并不够“优雅”,为什么这么说呢?我们回过头去看我们的代码,我们会发现每一个方法都需要一个兜底方法,那如果业务方法一多,我们的代码就会变得很膨胀;并且,我们将兜底的方法写在Controller中,那这样的话我们的代码就太过混乱了(耦合度高)。
那有没有什么方法可以解决以上两个问题呢?
问题解决
针对代码膨胀问题,我们可以通过定义全局统一的兜底处理方法,即对特定的业务逻辑指定特定的兜底方法,普通的业务逻辑使用通用的兜底方法。
步骤:
-
定义一个全局通用的兜底方法
-
在controller类上添加@DefaultProperties注解
-
不指定普通方法的fallbak
代码:
package cn.pigman.springcloud.controller;
import cn.pigman.springcloud.service.PaymentHystrixService;
import com.netflix.hystrix.contrib.javanica.annotation.DefaultProperties;
import com.netflix.hystrix.contrib.javanica.annotation.HystrixCommand;
import lombok.extern.slf4j.Slf4j;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.PathVariable;
import org.springframework.web.bind.annotation.RequestMapping;
import org.springframework.web.bind.annotation.RestController;
@RestController
@RequestMapping("/order")
@Slf4j
@DefaultProperties(defaultFallback = "payment_Global_FallbackMethod") //给类上添加全局兜底处理注解
public class OrderHystrixController {
@Autowired
private PaymentHystrixService paymentHystrixService;
@GetMapping("/consumer/payment/hystrix/ok/{id}")
public String paymentInfo_OK(@PathVariable("id") Integer id)
{
String result = paymentHystrixService.paymentInfo_OK(id);
return result;
}
@GetMapping("/consumer/payment/hystrix/timeout/{id}")
@HystrixCommand //如果是普通的业务逻辑,不指定fallbackMethod就会默认使用全局的兜底方法
public String paymentInfo_TIMEOUT(@PathVariable("id") Integer id)
{
String result = paymentHystrixService.paymentInfo_TimeOut(id);
return result;
}
public String paymentInfo_TIMEOUTHANDLER(@PathVariable("id") Integer id) {
return "我是消费者80,对方支付系统繁忙请10秒钟后再试或者自己运行出错请检查自己,o(╥﹏╥)o";
}
//全局默认的兜底方法
public String payment_Global_FallbackMethod() {
return "Global异常处理信息,请稍后再试,/(ㄒoㄒ)/~~";
}
}
针对耦合度高的问题,可以在客户端的
@FeginClient
注解中添加 fallback 属性来指定兜底处理类来解决该问题。
步骤:
-
创建一个实现了业务接口(service接口)的类
-
在业务接口中使用@FeignClient注解指定兜底类
代码:
-
实现类
@Component public class PaymentHystrixServiceHandler implements PaymentHystrixService { @Override public String paymentInfo_OK(Integer id) { return "PaymentHystrixServiceHandler fallback -paymentInfo_OK + (哈哈)"; } @Override public String paymentInfo_TimeOut(Integer id) { return "PaymentHystrixServiceHandler fallback -paymentInfo_TimeOut + (嘻嘻)"; } }
-
业务接口
@Service //注意:如果在yml文件中开启了feign对hystrix的支持,那么可以直接在FeignClient中通过 fallback 指定回调的类 // 在指定的类中进行服务降级的统一处理,这样就可以让兜底的方法和业务逻辑分离,实现解耦。 // 但有一点,指定的类必须实现当前接口 @FeignClient(value = "CLOUD-PROVIDER-HYSTRIX-PAYMENT", fallback = PaymentHystrixServiceHandler.class) public interface PaymentHystrixService { @GetMapping("/payment/hystrix/ok/{id}") String paymentInfo_OK(@PathVariable("id") Integer id); @GetMapping("/payment/hystrix/timeout/{id}") String paymentInfo_TimeOut(@PathVariable("id") Integer id); }
注意:如果我们需要在消费端用到Hystrix,那么最好在yml文件中开启Feign对Hystrix的支持。
服务熔断
当服务达到最大访问量后,直接拒绝别的服务访问,调用服务降级的兜底方法返回一个处理结果。
相关概念
- 断路器
一句话就是家里的保险丝
- 熔断是什么
熔断机制是应对雪崩效应的一种微服务链路保护机制。当扇出链路的某个微服务出错不可用或者响应时间太长时,会进行服务的降级,进而熔断该节点微服务的调用,快速返回错误的响应信息。当检测到该节点微服务调用响应正常后,恢复调用链路。
在Spring Cloud框架里,熔断机制通过Hystrix实现。Hystrix会监控微服务间调用的状况,当失败的调用到一定阈值,缺省是5秒内20次调用失败,就会启动熔断机制。熔断机制的注解是@HystrixCommand。
- 熔断类型
- 熔断打开:请求不再进行调用当前服务,内部设置时钟一般为MTTR(平均故障处理时间),当打开时长达到所设时钟则进 入半熔断状态
- 熔断关闭:熔断关闭不会对服务进行熔断
- 熔断半开:部分请求根据规则调用当前服务,如果请求成功且符合规则则认为当前服务恢复正常,关闭熔断
熔断实现
在业务方法上添加@HystrixCommand注解并设置相关的属性
//==========服务熔断
@HystrixCommand(fallbackMethod = "paymentCircuitBreaker_fallback", commandProperties = {
//是否开启断路器
@HystrixProperty(name = "circuitBreaker.enabled", value = "true"),
//请求次数
@HystrixProperty(name = "circuitBreaker.requestVolumeThreshold", value = "10"),
//时间窗口期
@HystrixProperty(name = "circuitBreaker.sleepWindowInMilliseconds", value = "10000"),
//失败率
@HystrixProperty(name = "circuitBreaker.errorThresholdPercentage", value = "60")
//总结:在时间窗口期内(10秒)如果请求次数(10次)达到失败率(10*%60=6次)就触发熔断(开启断路器)
})
public String paymentCircuitBreaker(Integer id)
{
if(id < 0)
{
throw new RuntimeException("******id 不能负数");
}
String serialNumber = IdUtil.simpleUUID();
return Thread.currentThread().getName()+"\t"+"调用成功,流水号: " + serialNumber;
}
//兜底方法
public String paymentCircuitBreaker_fallback(Integer id)
{
return "id 不能负数,请稍后再试,/(ㄒoㄒ)/~~ id: " +id;
}
总结:
熔断状态,经过一小段时间后(默认5秒),此时会进入到半熔断状态,会抽取一小部分请求并尝试转发,如果转发成功,则关闭熔断(断路器);恢复调用链路;如果转发失败,则继续开启熔断,并且在熔断的这段时间内,如果再有请求来调用服务,不会调用服务逻辑,而是直接调用降级fallback。
Hystrix工作流程
总结
- 构建HystrixCommand
- 执行HystrixCommand
- 检查缓存
- 检查断路器状态
- 检查线程池/信号队列
- 寻找依赖服务
- 将寻找结果返回给断路器
- 如果需要服务降级,那么就执行兜底方法
- 执行成功,返回处理结果
官网架构图:
图形化监控
概述
除了隔离依赖服务的调用以外,Hystrix还提供了准实时的调用监控(Hystrix Dashboard),Hystrix会持续地记录所有通过Hystrix发起的请求的执行信息,并以统计报表和图形的形式展示给用户,包括每秒执行多少请求多少成功,多少失败等。Netflix通过hystrix-metrics-event-stream项目实现了对以上指标的监控。Spring Cloud也提供了Hystrix Dashboard的整合,对监控内容转化成可视化界面。
使用
新建一个工程
这里省略创建过程
导入依赖
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-netflix-hystrix-dashboard</artifactId>
</dependency>
yml文件
server:
port: 9001
主启动类添加注解激活
@SpringBootApplication
@EnableHystrixDashboard //启用Hystrix图形化监控
public class HystrixDashboardMain9001 {
public static void main(String[] args) {
SpringApplication.run(HystrixDashboardMain9001.class, args);
}
}
输入监控服务地址:http://localhost:9001/hystrix进入到监控页面
注意:
被监控的微服务工程必须在 pom文件
中添加 actuator
依赖,并且在主启动类中必须用 @bean
返回一个 ServletRegistrationBean
对象。
pom文件
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-actuator</artifactId>
</dependency>
主启动类
@SpringBootApplication
@EnableEurekaClient
@EnableCircuitBreaker //激活服务降级
public class PaymentHystrixMain8001 {
public static void main(String[] args) {
SpringApplication.run(PaymentHystrixMain8001.class, args);
}
/**
*此配置是为了服务监控而配置,与服务容错本身无关,springcloud升级后的坑
*ServletRegistrationBean因为springboot的默认路径不是"/hystrix.stream",
*只要在自己的项目里配置上下面的servlet就可以了
*/
@Bean
public ServletRegistrationBean getServlet() {
HystrixMetricsStreamServlet streamServlet = new HystrixMetricsStreamServlet();
ServletRegistrationBean registrationBean = new ServletRegistrationBean(streamServlet);
registrationBean.setLoadOnStartup(1);
registrationBean.addUrlMappings("/hystrix.stream");
registrationBean.setName("HystrixMetricsStreamServlet");
return registrationBean;
}
}
以上配置完了之后,就可以在监控网页上开始监控了。
1:Delay:该参数用来控制服务器上轮询监控信息的延迟时间,默认为2000毫秒,可以通过配置该属性来降低客户端的网络和CPU消耗。
2:Title:该参数对应了头部标题Hystrix Stream之后的内容,默认会使用具体监控实例的URL,可以通过配置该信息来展示更合适的标题。
监控说明