微服务入门:SpringCloud
文章目录
前言
狂神说
一、这个阶段该如何学习
回顾之前的知识~
- JavaSE
- 数据库
- 前端
- Servlet
- Http
- Mybatis
- Spring
- SpringBoot
- Dubbo+Zookeeper+PRC(分布式基础)
- Maven、Git
- Ajax、Json
- …
串一下自己会的东西~
- 数据库
- Mybatis
- Spring
- SpringBoot
- Dubbo+Zookeeper+PRC(分布式基础)
- Maven、Git
- Ajax、Json
这个阶段该如何学
- 三层架构MVC
- 框架:
- Spring:IOC、AOP
- SpringBoot:新一代的JavaEE开发标准,自动装配
- 模块化(微服务拆分核心):all in one
微服务架构4个核心问题
- 服务很多,客户端怎么访问?
- 这么多服务,服务之间如何通信?
- 这么多服务,如何治理?
- 服务挂了怎么办?
核心问题解决方案
springcloud 生态! SpringBoot
- Spring Cloud NetFlix 一站式解决方案
- api网关,zuul组件
- Feign—基于Httpclient —Http通信方式:同步、阻塞
- 服务注册与发现:Eureka
- 熔断机制:Hystrix
- …
- Apache Dubbo Zookeeper 半自动,需要整合别人的
- API:没有,找第三方组件,或者自己实现
- Dubbo:高性能的基于JAVA RPC的通信框架
- 服务注册发现:Zookeeper
- 熔断机制 没有,可以借助Hystrix
- 即:Dubbo和Zookeeper这个方案并不完善,它只专一的在做RPC框架
- SpingCloud Alibaba 最新的一站式解决方案
- 新概念:服务网格~ Server Mash、istio
万变不离其宗
- API
- HTTP、RPC
- 注册与发现
- 熔断机制
网络不可靠
常见面试题
- 什么是微服务
- 微服务之间是如何独立通讯的
- SpringCloud和Dubbo有哪些区别
- Springboot和SpringCloud,请你谈谈对他们的理解
- 什么是服务熔断?什么是服务降级
- 微服务的优缺点分别是什么?说下你在项目开发中遇到的坑
- 你所知道的微服务技术栈有哪些? 请列举一二
- Eureka和dubbo+zookeeper都可以提供注册和发现的功能,请说说两个的区别?
二、微服务概述
1、什么是微服务
什么是微服务?微服务(Microservice Architecture)最近几年流行的一种架构思想,关于它的概念很难一言以蔽之。
究竟什么是微服务呢?我们在此引用ThoughtWorks公司的首席科学家Martin Fowler 于2014年提出的一段话:
原文:https://martinfowler.com/articles/microservice.html
汉化:https://www.cnblogs.com/liuning8023/p/4493156.html
- 就目前而言,对于微服务,业界并没有一个统一的, 标准的定义
- 但通常而言,微服务架构是一种架构模式,或者说是一种架构风格, 它提倡将单一的应用程序划分成一组小的服务,每个服务运行在其独立的自己的进程内,服务之间互相协调,互相配置,为用户提供最终价值。服务之间采用轻量级的通信机制互相沟通,每个服务都围绕着具体的业务进行构建,并且能够被独立的部署到生产不境中,另外,应尽量避免统一的,集中式的服务管理机制,对具体的一个服务而言,应根据业务上下文,选圣合适的语言,工具对其进行构建,可以有一个非常轻量级的集中式管理来协调这些服务,可以使用不同的语言来编写服务,也可以使用不同的数据存储;
可能有的人觉得官方的话太过生涩,我们从技术维度来理解下:
- 微服务化的核心就是将传统的一站式应用,根据业务拆分成一个一个服务。彻底的去耦合,每一个微服务提供单个业务功能的服务,一个服务做一件事情,从技术角度看就是一种小而独立的处理过程,类似进程的概念,能够自行单独启动或销毁,拥有自己独立的数据库
2、微服务与微服务架构
微服务
强调的是服务的大小,他关注的是某一个点,是具体解决某一问题 提供落地对应服务的一个服务应用,狭义的看,可以看做是IDEA中的一个微服务工程或者Module
- IDEA 工具里面使用Maven开发的一个个独立的Module,它具体是使用springboot开发的一个小模块,专门的事交给专业的模块来做,一个模块就做一件事情
- 强调的是一个个的个体,每个个体完成一个具体的任务或者功能
微服务架构
一种新的架构形式,Martin Fowler,2014提出
微服务架构是一种架构模式,它提倡将单一应用程序划分成一组小的服务,服务之间互相协调,互相配合,为用户提供最终价值。每个服务运行在其独立的进程中,服务于服务间采用轻量级的通信机制互相协作,每个服务都围绕着具体的业务进行构建,并且能够被独立的部署到生产环境中,另外,应尽量避免统一的,集中式的服务管理机制,对具体的一个服务而言,应根据业务上下文,选择合适的语言,工具对其进行构建。
3、微服务优缺点
优点
- 单一职责原则(eg.苹果手机:苹果:品牌;手机:产品)
- 每个服务足够内聚,足够小,代码容易理解,这样能聚焦一个指定的业务功能或业务需求;
- 开发简单,开发效率提高,一个服务可能就是专一的只干一件事;
- 微服务能够被小团队单独开发,这个小团队是2~5人的开发人员组成;
- 微服务是松耦合的,是有功能意义的服务,无论是在开发阶段或部署阶段都是独立的。
- 微服务能使用不同的语言开发。
- 易于和第三方集成,微服务允许容易且灵活的方式集成自动部署,通过持续集成工具,如jenkins, Hudson,
- 微服务易于被一个开发人员理解,修改和维护,这样小团队能够更关注自己的工作成果。无需通过合作才能体实现价值
- 微服务允许你利用融合最新技术。
- 微服务只是业务逻辑的代码,不会和HTML, CSS或其他界面混合
- 每个微服务都有自己的存储能力,可以有自己的数据库,也可以有统一数据库
缺点
- 开发人员要处理分布式系统的复杂性
- 多服务运维难度,随着服务的增加,运维的压力也在增大
- 系统部署依赖
- 服务间通信成本
- 数据一致性
- 系统集成测试
- 性能监控
4、微服务技术栈有哪些
5、为什么选择SpringCloud作为微服务架构
1、选型依据
- 整体解决方案和框架成熟度
- 社区热度
- 可维护性
- 学习曲线
2、当前各大IT公司用的微服务架构有哪些?
- 阿里:dubbo+HFS
- 京东:JSF
- 新浪:Motan
- 当当网: DubboX
- …
3、各服务框架对比
三、SpringCloud入门概述
1、SpringCloud是什么
Spring官网:https://spring.io/
SpringCloud,基于SpringBoot提供了一套微服务解决方案,包括服务注册与发现,配置中心,全链路监控,服务网关,负载均衡,熔断器等组件,除了基于NetFlix的开源组件做高度抽象封装之外,还有一些选型中立的开源组件。
SpringCloud利用SpringBoot的开发便利性,巧妙地简化了分布式系统基础设施的开发,SpringCloud为开发人员提供了快速构建分布式系统的一些工具,包括配置管理,服务发现,断路器,路由,微代理,事件总线,全局锁,决策竞选,分布式会话等等,他们都可以用SpringBoot的开发风格做到一键启动和部署。
SpringBoot并没有重复造轮子,它只是将目前各家公司开发的比较成熟,经得起实际考研的服务框架组合起来,通过SpringBoot风格进行再封装,屏蔽掉了复杂的配置和实现原理,最终给开发者留出了一套简单易懂,易部署和易维护的分布式系统开发工具包。
SpringCloud是分布式微服务架构下的一些站式解决方案,是各个微服务架构落地技术的集合体,俗称微服务全家桶。
2、SpringCloud和SpringBoot关系
- SpringBoot专注于快速方便的开发单个个体微服务。
- SpringCloud是关注全局的微服务协调整理治理框架,它将SpringBoot开发的一 个个单体微服务整合并管理起来,为各个微服务之间提供:配置管理,服务发现,断路器,路由,微代理,事件总线,全局锁,决策竞选,分布式会话等等集成服务。
- SpringBoot可以离开SpringClooud独立使用,开发项目,但是SpringCloud离不开SpringBoot, 属于依赖关系
- SpringBoot专注于快速、方便的开发单个个体微服务, SpringCloud关注 全局 的服务治理框架
3、Dubbo和SpringCloud技术选型
1、分布式+服务治理Dubbo
目前成熟的互联网架构:应用服务化拆分+消息中间件
2、Dubbo和SpringCloud对比
可以看下社区活跃度
https://github.com/dubbo
https://github.com/spring-cloud
结果:
最大区别: SpringCloud抛弃 了Dubbo的RPC通信,采用的是基于HTTP的REST方式。
严格来说,这两种方式各有优劣。虽然从- -定程度上来说,后者牺牲了服务调用的性能,但也避免了上面提到的原生RPC带来的问题。而且REST相比RPC更为灵活,服务提供方和调用方的依赖只依靠-纸契约, 不存在代码级别的强依赖,这在强调快速演化的微服务环境下,显得更加合适。
品牌机与组装机的区别
很明显,Spring Cloud的功能比DUBBO更加强大,涵盖面更广,而且作为Spring的拳头项目,它也能够与SpringFramework. Spring Boot. Spring Data. Spring Batch等其他Spring项目完美融合,这些对于微服务而言是至关重要的。使用Dubb构建的微服务架构就像组装电脑,各环节我们的选择自由度很高,但是最终结果很有可能因为一条内存质量不行就点不亮了,总是让人不怎么放心,但是如果你是一名高手,那这些都不是问题;而SpringCloud就像品牌机,在Spring Source的整合下,做了大量的兼容性测试,保证了机器拥有更高的稳定性,但是如果要在使用非原装组件外的东西,就需要对其基础有足够的了解。
社区支持与更新力度
最为重要的是,DUBBO停止了5年左右的更新,虽然2017.7重启了。 对于技术发展的新需求,需要由开发者自行拓展升级(比如当当网弄出了DubboX) , 这对于很多想要采用微服务架构的中小软件组织,显然是不太合适的,中小公司没有这么强大的技术能力去修改Dubbo源码+周边的一-整套解决方案,并不是每一个公司都有阿里的大牛+真实的线上生产环境测试过。
设计模式+微服务拆分思想:不一定善于表达,软实力,活跃度
总结:
曾风靡国内的开源RPC服务框架Dubbo在重启维护后,令许多用户为之雀跃,但同时,也迎来了-一些质疑的声音。互联网技术发展迅速,Dubbo 是否还能跟上时代? Dubbo与Spring Cloud相比又有何优势和差异?是否会有相关举措保证Dubbo的后续更新频率?
人物:Dubbo重启维护开发的刘军,主要负责人之一
刘军,阿里巴巴中间件高级研发工程师,主导了Dubbo重启维护以后的几个发版计划,专注于高性能RPC框架和微服务相关领域。曾负责网考拉RPC框架的研发及指导在内部使用,参与了服务治理平台、分布式跟踪系统、分布式一致性框架等从无到有的设计与开发过程。
解决的问题域不一样:Dubbo 的定位是一款RPC框架,Spring Cloud的目标是微服务架构的一站式解决方案
4、SpringCloud能干嘛
- Distributed/versioned configuration (分布式/版本控制配置)
- Service registration and discovery (服务注册与发现)
- Routing (路由)
- Service-to-service calls (服务到服务的调用)
- Load balancing (负载均衡配置)
- Circuit Breakers (断路器)
- Distributed messaging (分布式消息管理)
- …
5、SpringCloud在哪里下载
官网:http://projects.spring.io/spring-cloud/
spring cloud是一个由众多独立子项目组成的大型综合项目,每个子项目有不同的发行节奏,都维护着自己的发布版本号。spring Cloud通过一 一个资源清单BOM (Bi11 of Materials)来管理每个版本的子项目清单。为避免与子项月的发布号混淆,所以没有采用版本号的方式,而是通过命名的方式。
这些版本 名称的命名方式采用了伦敦地铁站的名称,同时根据字母表的顺序来对应版木时间顺序,比如:最早的Release版本: Ange1, 第二个Release版本: Brixton. 然后是Camden、Dalston. Edgware, 目前最新的是Finch1ey版本。(GA通用稳定版本 )
参考文档:
- https://springcloud.cc/spring-cloud-netflix.html
- 中文API文档: https://springcloud.cc/spring-cloud-dalston.html
- SpringCloud中国社区: http://springcloud.cn/
- SpringCloud中文网: https://springcloud.cc
四、SpringCloud起步与服务拆分
1、 总体介绍
- 我们会使用一个Dept部门模块做一个微服务通用案例Consurmer消费者(Client)通过REST调用Provider提供者(Server)提供的服务
- 回忆Spring、SpringMVC、Mybatis等以往学习的知识
- Maven的分包模块架构复习
一个简单的Maven模块结构是这样的:
– app-aperent:一个父项目(app-parent) 聚合很多子项目(app-util、aop-dao、app-web…)
|-- pom.xml
|
|-- app-core
||-- pom.xml
|
|-- app-web
||-- pom.xml
…
一个父工程带着多个子Module子模块
MicroServiceCloud父工程(Project)下初次带着3个子模块(Module)
- microservicecloud-api [封装的整体entity/接口/公共配置等]
- microservicecloud-provider-dept-8001 [服务提供者]
- microservicecloud-consumer-dept-80 [服务消费者]
- springcloud-eureka-7001[Eureka注册中心]
…
2、SpringCloud版本选择
大版本说明
实际开发版本关系
↓微服务的服务拆分↓
3、创建父工程
- 新建父工程Maven项目springcloud(MicroServiceCloud),切记Packageing(打包方式)是pom模式
- 主要是定义POM文件,将后续各个子模块公用的jar包等统一提取出来,类似一个抽象父类
pom.xml
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
<modelVersion>4.0.0</modelVersion>
<groupId>com.qia</groupId>
<artifactId>springcloud</artifactId>
<version>1.0-SNAPSHOT</version>
<modules>
<module>springcloud-api</module>
<module>springcloud-provider-dept-8001</module>
</modules>
<!-- 打包方式 pom -->
<packaging>pom</packaging>
<properties>
<project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
<junit.version>4.12</junit.version>
<lombok.version>1.16.18</lombok.version>
<log4j.version>1.2.17</log4j.version>
<maven.compiler.source>1.8</maven.compiler.source>
<maven.compiler.target>1.8</maven.compiler.target>
</properties>
<dependencyManagement>
<dependencies>
<!-- SpringCloud -->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-dependencies</artifactId>
<version>Greenwich.SR1</version>
<type>pom</type>
<scope>import</scope>
</dependency>
<!-- SpringBoot -->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-dependencies</artifactId>
<version>2.1.4.RELEASE</version>
<type>pom</type>
<scope>import</scope>
</dependency>
<!-- 数据库 -->
<dependency>
<groupId>mysql</groupId>
<artifactId>mysql-connector-java</artifactId>
<version>5.1.47</version>
</dependency>
<dependency>
<groupId>com.alibaba</groupId>
<artifactId>druid</artifactId>
<version>1.2.13</version>
</dependency>
<!-- SpringBoot启动器 -->
<dependency>
<groupId>org.mybatis.spring.boot</groupId>
<artifactId>mybatis-spring-boot-starter</artifactId>
<version>1.3.2</version>
</dependency>
<!-- 日志测试 -->
<dependency>
<groupId>junit</groupId>
<artifactId>junit</artifactId>
<version>${junit.version}</version>
</dependency>
<dependency>
<groupId>ch.qos.logback</groupId>
<artifactId>logback-core</artifactId>
<version>1.2.3</version>
</dependency>
<dependency>
<groupId>log4j</groupId>
<artifactId>log4j</artifactId>
<version>${log4j.version}</version>
</dependency>
<dependency>
<groupId>org.projectlombok</groupId>
<artifactId>lombok</artifactId>
<version>${lombok.version}</version>
</dependency>
</dependencies>
</dependencyManagement>
</project>
父工程为springcloud,其下有多个子mudule,详情参考完整代码了解
springcloud-api 微服务
springcloud-cunsumer-dept-80 服务提供者
springcloud-provider-dept-8001 服务消费者
4、子模块 springcloud-api 微服务
数据库db01
CREATE TABLE `db01`.`dept` ( `id` INT NOT NULL AUTO_INCREMENT , `dname` VARCHAR(60) NOT NULL , `dbsource` VARCHAR(60) , PRIMARY KEY (`id`)) ENGINE = MyISAM;
CREATE TABLE `dept` (
`deptno` bigint(20) NOT NULL AUTO_INCREMENT,
`dname` varchar(60) DEFAULT NULL,
`db_source` varchar(60) DEFAULT NULL,
PRIMARY KEY (`deptno`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT='部门表'
INSERT INTO dept(dname,db_source) VALUES ('开发部',DATABASE());
INSERT INTO dept(dname,db_source) VALUES ('项目部',DATABASE());
INSERT INTO dept(dname,db_source) VALUES ('研发部',DATABASE());
INSERT INTO dept(dname,db_source) VALUES ('运维部',DATABASE());
INSERT INTO dept(dname,db_source) VALUES ('市场部',DATABASE());
INSERT INTO dept(dname,db_source) VALUES ('人事部',DATABASE());
pom.xml
<!-- 当前Module自己需要的依赖,如果父依赖中已经配置了版本,这里就不用写了 -->
<dependencies>
<dependency>
<groupId>org.projectlombok</groupId>
<artifactId>lombok</artifactId>
</dependency>
</dependencies>
Dept
package com.qia.springcloud.pojo;
import lombok.Data;
import lombok.NoArgsConstructor;
import lombok.experimental.Accessors;
import java.io.Serializable;
/*
序列化
Dept 实体类
orm 类表关系映射
*/
@Data
@NoArgsConstructor
@Accessors(chain = true)//链式写法
public class Dept implements Serializable {
private Long deptno;
private String dname;
private String db_source;
public Dept(String dname) {
this.dname = dname;
}
/*
链式写法:
Dept dept = new Dept();
dept.setDeptNo(11).setDname('ssss').setDb_source('001');
*/
}
5、Rest学习环境搭建:服务提供者
pom.xml
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
<parent>
<artifactId>springcloud</artifactId>
<groupId>com.qia</groupId>
<version>1.0-SNAPSHOT</version>
</parent>
<modelVersion>4.0.0</modelVersion>
<artifactId>springcloud-provider-dept-8001</artifactId>
<dependencies>
<!-- 我们需要拿到实体类,所以要配置api module-->
<dependency>
<groupId>com.qia</groupId>
<artifactId>springcloud-api</artifactId>
<version>1.0-SNAPSHOT</version>
</dependency>
<dependency>
<groupId>junit</groupId>
<artifactId>junit</artifactId>
</dependency>
<dependency>
<groupId>mysql</groupId>
<artifactId>mysql-connector-java</artifactId>
</dependency>
<dependency>
<groupId>com.alibaba</groupId>
<artifactId>druid</artifactId>
</dependency>
<dependency>
<groupId>ch.qos.logback</groupId>
<artifactId>logback-core</artifactId>
</dependency>
<dependency>
<groupId>org.mybatis.spring.boot</groupId>
<artifactId>mybatis-spring-boot-starter</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-test</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<!-- jetty -->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-jetty</artifactId>
</dependency>
<!-- 热部署工具 -->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
</dependency>
</dependencies>
</project>
application.yml
server:
port: 8001
# mybatis的配置
mybatis:
type-aliases-package: com.qia.springcloud.pojo
config-location: classpath:mybatis/mybatis-config.xml
mapper-locations: classpath:mybatis/mapper/*.xml
# 驼峰
# configuration:
# map-underscore-to-camel-case: true
# spring的配置
spring:
application:
name: springcloud-provider-dept
datasource:
type: com.alibaba.druid.pool.DruidDataSource
driver-class-name: org.gjt.mm.mysql.Driver
url: jdbc:mysql://localhost:3306/db01?useUnicode=true&characterEncoding=utf-8&serverTimezone=GMT%2B8&useSSL=false
username: root
password: 123456
#Spring Boot 默认是不注入这些属性值的,需要自己绑定
#druid 数据源专有配置
initialSize: 5
minIdle: 5
maxActive: 20
maxWait: 60000
timeBetweenEvictionRunsMillis: 60000
minEvictableIdleTimeMillis: 300000
validationQuery: SELECT 1 FROM DUAL
testWhileIdle: true
testOnBorrow: false
testOnReturn: false
poolPreparedStatements: true
#配置监控统计拦截的filters,stat:监控统计、log4j:日志记录、wall:防御sql注入
#如果允许时报错 java.lang.ClassNotFoundException: org.apache.log4j.Priority
#则导入 log4j 依赖即可,Maven 地址:https://mvnrepository.com/artifact/log4j/log4j
filters: stat,wall,log4j
maxPoolPreparedStatementPerConnectionSize: 20
useGlobalDataSourceStat: true
connectionProperties: druid.stat.mergeSql=true;druid.stat.slowSqlMillis=500
mybatis-config.xml
<?xml version="1.0" encoding="UTF-8" ?>
<!DOCTYPE configuration
PUBLIC "-//mybatis.org//DTD Config 3.0//EN"
"http://mybatis.org/dtd/mybatis-3-config.dtd">
<configuration>
<settings>
<!-- 开启二级缓存 -->
<setting name="cacheEnabled" value="true"/>
</settings>
</configuration>
mapper接口
package com.qia.springcloud.dao;
import com.qia.springcloud.pojo.Dept;
import org.apache.ibatis.annotations.Mapper;
import org.springframework.stereotype.Repository;
import java.util.List;
@Mapper
@Repository
public interface DeptDao {
public boolean addDept(Dept dept);
public Dept queryById(Long id);
public List<Dept> queryAll();
}
mapper.xml
<?xml version="1.0" encoding="UTF-8" ?>
<!DOCTYPE mapper
PUBLIC "-//mybatis.org//DTD Mapper 3.0//EN"
"http://mybatis.org/dtd/mybatis-3-mapper.dtd">
<mapper namespace="com.qia.springcloud.dao.DeptDao">
<insert id="addDept" parameterType="Dept">
insert into dept (dname,db_source)
values (#{dname},DATABASE())
</insert>
<select id="queryById" resultType="Dept" parameterType="Long">
select * from dept where deptno=#{deptno}
</select>
<select id="queryAll" resultType="Dept" >
select * from dept
</select>
</mapper>
DeptService
package com.qia.springcloud.service;
import com.qia.springcloud.pojo.Dept;
import java.util.List;
public interface DeptService {
public boolean addDept(Dept dept);
public Dept queryById(Long id);
public List<Dept> queryAll();
}
DeptServiceImpl
package com.qia.springcloud.service;
import com.qia.springcloud.dao.DeptDao;
import com.qia.springcloud.pojo.Dept;
import org.springframework.beans.factory.annotation.Autowired;
import java.util.List;
@Service
public class DeptServiceImpl implements DeptService{
@Autowired
private DeptDao deptDao;
@Override
public boolean addDept(Dept dept) {
return deptDao.addDept(dept);
}
@Override
public Dept queryById(Long id) {
return deptDao.queryById(id);
}
@Override
public List<Dept> queryAll() {
return deptDao.queryAll();
}
}
DeptController
package com.qia.springcloud.controller;
import com.qia.springcloud.pojo.Dept;
import com.qia.springcloud.service.DeptService;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.PathVariable;
import org.springframework.web.bind.annotation.PostMapping;
import org.springframework.web.bind.annotation.RestController;
import java.util.List;
//提供Restful服务!
@RestController
public class DeptController {
@Autowired
private DeptService deptService;
@PostMapping("/dept/add")
public boolean addDept(Dept dept){
return deptService.addDept(dept);
}
@GetMapping("/dept/get/{id}")
public Dept get(@PathVariable("id") Long id){
return deptService.queryById(id);
}
@PostMapping("/dept/list")
public List<Dept> queryAll(){
return deptService.queryAll();
}
}
主启动类
package com.qia.springcloud;
import org.springframework.boot.SpringApplication;
import org.springframework.boot.autoconfigure.SpringBootApplication;
//主启动类
@SpringBootApplication
public class DeptProvider_8001 {
public static void main(String[] args) {
SpringApplication.run(DeptProvider_8001.class,args);
}
}
6、Rest学习环境搭建:服务消费者
pom.xml
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
<parent>
<artifactId>springcloud</artifactId>
<groupId>com.qia</groupId>
<version>1.0-SNAPSHOT</version>
</parent>
<modelVersion>4.0.0</modelVersion>
<artifactId>springcloud-consumer-dept-80</artifactId>
<dependencies>
<dependency>
<groupId>com.qia</groupId>
<artifactId>springcloud-api</artifactId>
<version>1.0-SNAPSHOT</version>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
</dependency>
</dependencies>
</project>
application.yml
server:
port: 80
ConfigBean
package com.qia.springcloud.config;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
import org.springframework.web.client.RestTemplate;
@Configuration
public class ConfigBean {
// @Configuration -- spring applicationContext.xml
@Bean
public RestTemplate getRestTemplate(){
return new RestTemplate();
}
}
DeptConsumerController
package com.qia.springcloud.controller;
import com.qia.springcloud.pojo.Dept;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Controller;
import org.springframework.web.bind.annotation.PathVariable;
import org.springframework.web.bind.annotation.RequestMapping;
import org.springframework.web.client.RestTemplate;
import java.util.List;
@RestController
public class DeptConsumerController {
// 理解:消费者,不应该有service层
// RestTemplate ... 供我们直接调用就可以了!注册到spring中
// (url,实体:Map,Class<T> responseType)
@Autowired
private RestTemplate restTemplate;
//提供多种便捷访问远程http服务的方法,简单的Restful服务模板~
private static final String REST_URL_PREFIX = "http://localhost:8001";
@RequestMapping("/c/dept/get/{id}")
public Dept get(@PathVariable("id") Long id){
return restTemplate.getForObject(REST_URL_PREFIX+"/dept/get/"+id,Dept.class);
}
@RequestMapping("/c/dept/add")
public boolean add(Dept dept){
return restTemplate.postForObject(REST_URL_PREFIX+"/dept/add",dept,Boolean.class);
}
@RequestMapping("/c/dept/list")
public List<Dept> list(){
return restTemplate.getForObject(REST_URL_PREFIX+"/dept/list",List.class);
}
}
主启动类
package com.qia.springcloud;
import org.springframework.boot.SpringApplication;
import org.springframework.boot.autoconfigure.SpringBootApplication;
@SpringBootApplication
public class DeptConsumer_80 {
public static void main(String[] args) {
SpringApplication.run(DeptConsumer_80.class,args);
}
}
先启动服务提供者,再启动服务消费者
五、Eureka 服务注册与发现
1、Eureka:什么是Eureka
1、什么是Eureka
- Eureka:怎么读?
- Netflix在涉及Eureka时,遵循的就是AP原则
- Eureka是Netflix的一个子模块,也是核心模块之一。Eureka是基于REST的服务,用于定位服务,以实现云端中间件层服务发现和故障转移,服务注册与发现对于微服务来说是非常重要的,有了服务注册与发现,只需要使用服务的标识符,就可以访问到服务,而不需要修改服务调用的配置文件了,功能类似于Dubbo的注册中心,比如Zookeeper;
2、原理
- Eureka的基本架构
- Springcloud 封装了Netflix公司开发的Eureka模块来实现服务注册与发现 (对比Zookeeper)
- Eureka采用了C-S的架构设计,EurekaServer作为服务注册功能的服务器,他是服务注册中心.
- 而系统中的其他微服务,使用Eureka的客户端连接到EurekaServer并维持心跳连接。这样系统的维护人员就可以通过EurekaServer来监控系统中各个微服务是否正常运行,Springcloud的一些其他模块 (比如Zuul) 就可以通过EurekaServer来发现系统中的其他微服务,并执行相关的逻辑
- Dubbo架构对比
- Eureka 包含两个组件:Eureka Server 和 Eureka Client
- Eureka Server 提供服务注册,各个节点启动后,回在EurekaServer中进行注册,这样Eureka Server中的服务注册表中将会储存所有课用服务节点的信息,服务节点的信息可以在界面中直观的看到
- Eureka Client 是一个Java客户端,用于简化EurekaServer的交互,客户端同时也具备一个内置的,使用轮询负载算法的负载均衡器。在应用启动后,将会向EurekaServer发送心跳 (默认周期为30秒) 。如果Eureka Server在多个心跳周期内没有接收到某个节点的心跳,EurekaServer将会从服务注册表中把这个服务节点移除掉 (默认周期为90s)
- 三大角色
- Eureka Server:提供服务的注册与发现
- Service Provider:服务生产方,将自身服务注册到Eureka中,从而使服务消费方能狗找到
- Service Consumer:服务消费方,从Eureka中获取注册服务列表,从而找到消费服务
- 盘点目前工程状况
2、Eureka:服务注册-信息配置-自我保护机制
1、配置构建Eureka注册中心
1、导入依赖
2、编写配置文件
3、开启这个功能@EnableXXX
4、配置类
pom.xml
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
<parent>
<artifactId>springcloud</artifactId>
<groupId>com.qia</groupId>
<version>1.0-SNAPSHOT</version>
</parent>
<modelVersion>4.0.0</modelVersion>
<artifactId>springcloud-eureka-7001</artifactId>
<dependencies>
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-eureka-server</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
</dependency>
</dependencies>
</project>
appllication.yml
server:
port: 7001
# Eureka配置
eureka:
instance:
hostname: localhost # Eureka服务端的实例名称
client:
register-with-eureka: false # 表示是否向Eureka注册中心注册自己
fetch-registry: false # false表示自己为注册中心(即,表示不从注册中心拉取注册)
service-url: # 监控页面
defaultZone: http://${eureka.instance.hostname}:${server.port}/eureka/
主启动类
package com.qia.springcloud;
import org.springframework.boot.SpringApplication;
import org.springframework.boot.autoconfigure.SpringBootApplication;
import org.springframework.cloud.netflix.eureka.server.EnableEurekaServer;
@SpringBootApplication
@EnableEurekaServer // EnableEurekaServer 服务端的启动类,可以接受别人注册进来 ~
public class EurekaServer_7001 {
public static void main(String[] args) {
SpringApplication.run(EurekaServer_7001.class,args);
}
}
启动之后,访问 http://localhost:7001/
2、服务提供者 服务注册
pom.xml添加eureka依赖
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-eureka</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
application.yml
# Eureka的配置,服务注册到哪里
eureka:
client:
service-url:
defaultZone: http://localhost:7001/eureka/
主启动类开启配置
@EnableEurekaClient // 在服务启动后注册到Eureka中
启动
3、信息配置
1、Status信息配置
SPRINGCLOUD-PROVIDER-DEPT
UP (1) - localhost:springcloud-provider-dept:8001
可以修改8001的application.yml
# Eureka的配置,服务注册到哪里
eureka:
client:
service-url:
defaultZone: http://localhost:7001/eureka/
instance:
instance-id: springcloud-provider-dept-8001
2、info信息配置
当注册中心未关闭,关闭8001的服务提供者,或者代码出错的时候,7001注册中心页面会爆红提示自我保护机制
EMERGENCY! EUREKA MAY BE INCORRECTLY CLAIMING INSTANCES ARE UP WHEN THEY’RE NOT. RENEWALS ARE LESSER THAN THRESHOLD AND HENCE THE INSTANCES ARE NOT BEING EXPIRED JUST TO BE SAFE.
紧急!EUREKA 可能错误地声称实例已启动,而实际上它们没有启动。 续订小于阈值,因此实例不会为了安全而过期。
这时我们可以去配置关于8001的info信息
以下修改8001
pom.xml
<!-- actuator完善监控信息 -->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-actuator</artifactId>
</dependency>
application.yml
# info配置
info:
app.name: qiaqia-springcloud
company.name: blog.qiaqia.com
4、自我保护机制
EureKa自我保护机制:好死不如赖活着
一句话总结就是:某时刻某一个微服务不可用,eureka不会立即清理,依旧会对该微服务的信息进行保存!
- 默认情况下,如果EurekaServer在一定时间内没有收到实例的心跳,EurekaServer将会注销该实例(从注册表中删除)(默认是90秒)。但是当网络分区故障发生时,微服务与Eureka之间无法正常通行,以上行为可能变得非常危险了---- 因为微服务本身其实是健康的,此时本不应该注销这个服务。Eureka通过 自我保护机制 来解决这个问题 ---- 当EurekaServer节点在短时间内丢失过多客户端时(可能发生了网络分区故障), 那么这个节点就会进入自我保护模式。一旦进入该模式,EurekaServer就会保护服务注册表中的信息,不再删除服务注册表中的数据(也就是不会注销任何微服务)。当网络故障恢复后,该EurekaServer节点会自动退出自我保护模式。
- 在自我保护模式中,EurekaServer会保护服务注册表中的信息, 不再注销任何服务实例。当它收到的心跳数重新恢复到阈值以上时,该EurekaServer节点就会 自动退出自我保护模式。它的设计哲学就是宁可保留错误的服务注册信息,也不盲目注销任何可能健康的服务实例。一句话:好死不如赖活着
- 综上,自我保护模式是一种应对网络异常的安全保护措施。它的架构哲学是宁可同时保留所有微服务(健康的微服务和不健康的微服务都会保留),也不盲目注销任何健康的微服务。使用自我保护模式,可以让Eureka集群更加的健壮和稳定
- 在SpringCloud中, 可以使用
eureka. server. enable-self-preservation = false
禁用自我保护模式【不推荐关闭自我保护机制】
5、8001服务发现Discovery
- 对于注册进Eureka里面的微服务,可以通过服务大仙来获得该服务的信息。【对外暴露服务】
- 修改microservicecloud-provider-dept-8001工程中的DeptController
@Autowired
private DiscoveryClient client;
//注册进来的微服务,获取一些信息
@GetMapping("/dept/discovery")
public Object discovery(){
//获取微服务列表的清单
List<String> services = client.getServices();
System.out.println("discovery==>services:"+services);
//得到一个具体的微服务信息,通过具体的微服务id,applicationName
List<ServiceInstance> instances = client.getInstances("SPRINGCLOUD-PROVIDER-DEPT");
for (ServiceInstance instance : instances) {
System.out.println("getInstanceId:"+instance.getInstanceId());
System.out.println("getHost:"+instance.getHost());//
System.out.println("getMetadata:"+instance.getMetadata());
System.out.println("getPort:"+instance.getPort());//
System.out.println("getScheme:"+instance.getScheme());
System.out.println("getServiceId:"+instance.getServiceId());//
System.out.println("getUri:"+instance.getUri());//
}
return this.client;
}
- 在主启动类上开启服务发现
@EnableDiscoveryClient//开启服务发现
启动
显示qiaqia,不是localhost,是因为在电脑设置里改了设备名称
3、Eureka:集群环境配置
1、模拟集群
根据7001模块,新建7002,7003模块
修改
pom.xml的依赖
application.yml的port
启动类
现在一共是有3个注册中心
想搭建集群,就要让3个注册中心产生关系
所以要让它们互相绑定
修改域名映射
为了体验集群搭载在不同的电脑上,我们进入C:\Windows\System32\drivers\etc里面修改hosts文件
在文件的末尾添加下面几行
127.0.0.1 eureka7001.com
127.0.0.1 eureka7002.com
127.0.0.1 eureka7003.com
修改三个注册中心的application.yml
server:
port: 7003
# Eureka配置
eureka:
instance:
# hostname: localhost # Eureka服务端的实例名称
hostname: eureka7001.com # Eureka服务端的实例名称
client:
register-with-eureka: false # 表示是否向Eureka注册中心注册自己
fetch-registry: false # false表示自己为注册中心(即,表示不从注册中心拉取注册)
service-url: # 监控页面
# defaultZone: http://${eureka.instance.hostname}:${server.port}/eureka/
# 单机:defaultZone: http://${eureka.instance.hostname}:${server.port}/eureka/
# 集群:(关联,挂载其他注册中心页面)
defaultZone: http://eureka7002.com:7002/eureka/,http://eureka7002.com:7002/eureka/
# 另两个注册中心的application.yml也是这样,挂载多个注册中心即可,这样就互相绑定了
另两个注册中心的application.yml也是这样,挂载多个注册中心即可,这样就互相绑定了
主要修改了
hostname: eureka7001.com
defaultZone:http://eureka7002.com:7002/eureka/,http://eureka7002.com:7002/eureka/
2、集群发布
修改服务提供者的application.yml
发布到三个注册中心
# Eureka的配置,服务注册到哪里
eureka:
client:
service-url:
# defaultZone: http://localhost:7001/eureka/
defaultZone: http://eureka7001.com:7001/eureka/,http://eureka7002.com:7002/eureka/,http://eureka7002.com:7002/eureka/
# 修改eureka上的默认描述信息
instance:
instance-id: springcloud-provider-dept-8001
主要是
defaultZone: http://eureka7001.com:7001/eureka/,http://eureka7002.com:7002/eureka/,http://eureka7002.com:7002/eureka/
启动测试
把三个注册中心启动,访问注册中心页面
这样模拟集群就搭建好了,就可以把一个项目挂载到三个服务器上了
4、Eureka:CAP原则及对比Zookeeper
1、CAP原则
- 回顾CAP原则
- RDBMS (Mysql. Oracle. sqlServer) ===> ACID
- NoSQL (redis. mongdb) ===>CAP
- ACID是什么?
- A(Atomicity)原子性
- C(Consistency)一致性
- I(Isolation))隔离性
- D(Durability)持久性
- CAP是什么?
- C(Consistency)强一致性
- A(Availabilty)可用性
- P(Partition tolerance)分区容错性
- CAP的三进二:CA、AP、 CP
- 经典CAP图
- 经典CAP图
- CAP理论的核心
- 一个分布式系统不可能同时很好的满足-致性,可用性和分区容错性这三个需求
- 根据CAP原理,将NoSQL数据库分成了满足CA原则,满足CP原则和满足AP原则三大类:
- CA:单点集群,满足一致性,可用性的系统,通常可扩展性较差
- CP:满足一致性,分区容错性的系统,通常性能不是特别高
- AP:满足可用性,分区容错性的系统,通常可能对一致性要求低一些
2、Eureka和Zookeeper的对比
作为服务注册中心,Eureka比Zookeeper好在哪里?
著名的CAP理论指出,一个分布式系统不可能同时满足C (一致性)、A (可用性)、P (容错性) .
由于分区容错性P在分布式系统中是必须要保证的,因此我们只能在A和C之间进行权衡。
- Zookeeper保证的是CP
- Eureka保证的是AP
Zookeeper保证的是CP
当向注册中心查询服务列表时,我们可以容忍注册中心返回的是几分钟以前的注册信息,但不能接受服务直接down掉不可用(Eureka会自我保护机制,心跳等待)。也就是说,服务注册功能对可用性的要求要高于一致性。但是zk会出现这样一种情况,当master节点因为网络故障与其他节点失去联系时,剩余节点会重新进行leader选举。问题在于,选举leader的时间太长,30 ~ 120s,且选举期间整个zk集群都是不可用的,这就导致在选举期间注册服务瘫痪。在云部署的环境下,因网络问题使得zk集群失去master节点是较大概率会发生的事,虽然服务能够最终恢复,但是漫长的选举时间导致的注册长期不可用是不能容忍的。
Eureka保证的是AP
Eureka看明白了这一点,因此在设计时就优先保证可用性。Eureka各个节点都是平等的,几个节点挂掉不会影响正常节点的工作,剩余的节点依然可以提供注册和查询服务。而Eureka的客户端在向某个Eureka注册或如果发现连接失败,则会自动切换至其它节点,只要有一台Eureka还在,就能保证注册服务可用(保证可用性),只不过查到的信息可能不是最新的(不保证强一致性)。除此之外,Eureka还有一种自我保护机制,如果在15分钟内超过85%的节点都没有正常的心跳,那么Eureka就认为客户端与注册中心出现了网络故障,此时会出现以下几种情况:
1、Eureka不再从注册列表中移除因为长时间没收到心跳而应该过期的服务(E检测到服务可能崩了,所以先不再移除服务)
2、Eureka仍然能够接受新服务的注册和查询请求,但是不会被同步到其它节点上(即保证当前节点依然可用)(因为其它注册点崩了,所以先不同步过去,但是其它注册点一恢复,就会同步过去)
3、当网络稳定时,当前实例新的注册信息会被同步到其它节点中
结论:
- 因此,Eureka可以很好的应对因网络故障导致部分节点失去联系的情况,而不会像zookeeper那样使整个注册服务瘫痪。
- ZK能保证拿到的是最新的数据,但可能会down
- E保证的是几乎不会全down,但是拿到的数据可能不是最新的
六、Ribbon
1、Ribbon:负载均衡及Ribbon
1、Ribbon是什么
ribbno是什么
- Spring Cloud Ribbon是基于Netflix Ribbon实现的一套客户端负载均衡的工具。
- 简单的说,Ribbon是Netflix发布的开源项目,主要功能是提供客户端的软件负载均衡算法,将NetFlix的中间层服务连接在一起。Ribbon的客户端组件提供一系列完整的配置项如:连接超时、重试等等。简单的说,就是在配置文件中列出LoadBalancer(简称LB:负载均衡)后面所有的机器,Ribbon会自动的帮助你基于某种规则(如简单轮询,随机连接等等)去连接这些机器。我们也很容易使用Ribbon实现自定义的负载均衡算法!
ribbon能干嘛?
- LB,即负载均衡(Load Balance),在微服务或分布式集群中经常用的一种应用。
- 负载均衡简单的说就是将用户的请求平摊的分配到多个服务上,从而达到系统的HA(高可用)
- 常见的负载均衡软件有 Nginx,Lvs等等
- dubbo、SpringCloud中均给我们提供了负载均衡,SpringCloud的负载均衡算法可以自定义
- 负载均衡简单分类:
- 集中式LB
- 即在服务的消费方和提供方之间使用独立的LB设施,如Nginx, 由该设施负责把访问请求通过某种策略转发至服务的提供方!
- 进程式LB
- 将LB逻辑集成到消费方,消费方从服务注册中心获知有哪些地址可用,然后自己再从这些地址中选出一个合适的服务器。
- Ribbon就属于进程内LB,它只是一个类库,集成于消费方进程,消费方通过它来获取到服务提供方的地址!
- 集中式LB
2、集成ribbon
在消费者客户端集成ribbon
1、导入依赖
在消费者 80 端口配置Eureka和Ribbon负载均衡的依赖
pom.xml
<!-- Ribbon -->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-ribbon</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
<!-- Eureka -->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-eureka</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
2、编写配置
application.yml
#Eureka配置
eureka:
client:
register-with-eureka: false # 不向eureka注册自己
service-url:
defaultZone: http://localhost:7001/eureka/
# defaultZone: http://eureka7001.com:7001/eureka/,http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/
(nginx是负载均衡用户请求的,而eureka是负载均衡消费者工程的,消费者拿到服务列表后,从其中按照负载均衡算法选择一个主机去访问)
3、修改启动项
@EnableEurekaClient
4、修改配置类,配置负载均衡实现RestTemplate
仅增加一个注解即可
@LoadBalanced
//配置负载均衡实现RestTemplate
@Bean
@LoadBalanced //Ribbon
public RestTemplate getRestTemplate(){
return new RestTemplate();
}
5、修改客户端控制类
//Ribbon。我们这里的地址,应该是一个变量,通过服务名来访问目标url
//原来的
// private static final String REST_URL_PREFIX = "http://localhost:8001";
private static final String REST_URL_PREFIX = "http://SPRINGCLOUD-PROVIDER-DEPT";
//Ribbon。我们这里的地址,应该是一个变量,通过服务名来访问目标url
6、启动
进程式负载均衡,由消费者决定访问谁
(负载均衡有两种:服务器端负载均衡,如Nginx;客户端负载均衡:Ribbon)
要开启注册中心,开启服务提供者,再开启消费者
80开启后,会报错的,可以注释掉ribbon依赖,仔细查看application.yml文件是否写错代码
Ribbon和Eureka整合后,客户端可以根据服务提供者的application.name,即服务id直接调用,不用关心IP地址和端口号
(注意服务名不要使用下划线)
2、Ribbon:使用Ribbon实现负载均衡
1、搭建三个数据库
db01、db02、db03
2、做三个服务提供者
2.1、拷贝pom.xml的依赖
2.2、拷贝resources包,其中application.yml,修改端口号(前提是3个服务的名字要一致),其他不需修改
2.3、拷贝java包,记得修改启动类,其他不需修改
3、启动
先启动注册中心,然后启动三个服务提供者,最后启动消费者
消费者访问页面http://localhost/c/dept/list(端口号默认80,所以不用写端口号)
发现查出来的数据,数据库是db03
不断刷新url,发现数据的查询结果不一样,db01–>db02–>db03,轮询(ribbon的默认算法,结果固定会是1、2、3)
3、Ribbon:自定义负载均衡算法
负载均衡的核心实现:IRule
(@LoadBandle主要是开启负载均衡)
查看源码
IRule,是个接口,基本上全部的均衡算法都实现了这个接口
查看它的实现类
RoundRobinRule 轮询
RandomRule 随机
AvailabilityFilteringRule 会先过滤掉,跳闸或者访问故障,或者崩溃了的服务,对剩下的进行轮询
WeightResponseTimeRule 会根据配置的权重做规则判断
RetryRule 会先按照轮询获取服务,如果服务获取失败,则会在指定的时间内进行重试
Ribbon默认是轮询算法,也就是RoundRobinRule,我们分析一下他的源码
获取所有服务
获取服务方法:每次加载下一个节点,即轮询
那我们要怎么使用别的算法呢?
体验使用随机算法
在80项目的config类里面注册Bean
(application.yml里面可以直接配置随机的算法)
@Bean
public IRule myRule() {
return new RandomRule(); //默认为轮询,现在我们使用随机的
}
自定义我们的负载均衡算法
注意:自定义负载均衡的包要在主目录外
启动类,指定对谁进行改造
@RibbonClient(name = "SPRINGCLOUD-PROVIDER-DEPT")
指定在哪个地方使用
//在微服务启动的时候,就能去加载我们自定义的Ribbon类
@RibbonClient(name = "SPRINGCLOUD-PROVIDER-DEPT",configuration = MyRandomRule.class)
记得要把刚刚写在ConfigBean里面的Bean注释掉(不能在扫描包下出现两个Irule)
查看文档
https://www.springcloud.cc/spring-cloud-dalston.html
查看ribbon相关的
https://www.springcloud.cc/spring-cloud-dalston.html#spring-cloud-ribbon
我们自定义的负载均衡算法规则类,不应被spring自动扫描到bean容器里,这样我们不配置也会生效到全部的Client。我们应该放到外面需要用的时候,我们再通过配置让它生效
MyRandomRule
import com.netflix.client.config.IClientConfig;
import com.netflix.loadbalancer.AbstractLoadBalancer;
import com.netflix.loadbalancer.AbstractLoadBalancerRule;
import com.netflix.loadbalancer.ILoadBalancer;
import com.netflix.loadbalancer.Server;
import java.util.List;
import java.util.concurrent.ThreadLocalRandom;
public class MyRandomRule extends AbstractLoadBalancerRule {
//代码全是复制的 DiyRandomRule.class的,自定义负载均衡需要自己修改
//当前自定义负载均衡:
//每个服务访问5次。换下一个服务
//total=0,默认=0,如果=5,指向下一个服务节点
//index=0,默认0,如果total=5,则inedx+1
private int totla=0;//被调用的次数
private int currentIndex=0;//当前是谁在提供服务
public Server choose(ILoadBalancer lb, Object key) {
if (lb == null) {
return null;
} else {
Server server = null;
while (server == null) {
if (Thread.interrupted()) {
return null;
}
List<Server> upList = lb.getReachableServers();//获得活着的服务
List<Server> allList = lb.getAllServers();//获得全部的服务
int serverCount = allList.size();
if (serverCount == 0) {
return null;
}
//int index = this.chooseRandomInt(serverCount);//生成区间随机数
//server = (Server) upList.get(index);//从活着的服务中,随机获取一个
//================自定义负载均衡算法==================
if(totla<5){
server = upList.get(currentIndex);
totla++;
}else{
totla=0;
currentIndex++;
if (currentIndex>=upList.size()){//当前节点大于活着的数量
currentIndex = 0;
}
server=upList.get(currentIndex);//从活着的服务中,获取指定的服务来进行操作
}
//====================================================
if (server == null) {
Thread.yield();
} else {
if (server.isAlive()) {
return server;
}
server = null;
Thread.yield();
}
}
return server;
}
}
protected int chooseRandomInt(int serverCount) {
return ThreadLocalRandom.current().nextInt(serverCount);
}
public Server choose(Object key) {
return this.choose(this.getLoadBalancer(), key);
}
public void initWithNiwsConfig(IClientConfig clientConfig) {
}
}
MyRules
import com.netflix.loadbalancer.IRule;
import com.netflix.loadbalancer.RandomRule;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
@Configuration
public class MyRules {
@Bean
public IRule testRule(){
return new MyRandomRule();//默认是轮询,现在我们定义为自己写的
}
}
代码需要自己修改一下,定义的数组边界有问题
4、自己的小结论
- 单机:服务注册
- 集群:挂载模拟多个注册中心(服务提供者注册到多个注册中心上,都可以使用,Eureka可以支持只要还有一个注册中心在,就不会down)
- 负载均衡:模拟多个服务提供者(消费者在注册中心,通过算法实现负载均衡,选择一个服务提供者,进行消费)
七、Feigh负载均衡
Feigh:使用接口方式调用服务
1、简介
Feign是声明式的web service客户端,它让微服务之间的调用变得更简单了,类似controller调用service. SpringCloud集成了Ribbon和Eureka,可在使用Feign时提供负载均衡的http客户端。
只需要创建一个接口,然后添加注解即可!
feign,主要是社区版,大家都习惯面向接口编程。这个是很多开发人员的规范。调用微服务访问的两种方法
- 微服务名字 【ribbon】
- 接口和注解 【feign】
Feign 能干什么?
- Feign旨在使编写Java Http客户端变得更容易
- 前面在使用Ribbon + RestTemplate时,利用RestTemplate对Http请求的封装处理, 形成了一套模板化的调用方法。但是在实际开发中,由于对服务依赖的调用可能不止一处,往往一个接口会被多处调用,所以通常都会针对每个微服务自行封装一些客户端类来包装这些依赖服务的调用。 所以,Feign在此基础。上做了进一步封装,由他来帮助我们定义和实现依赖服务接口的定义,在Feign的实现下,我们只需要创建一个接口并使用注解的方式来配置它(类似于以前Dao接口上标注Mapper注解,现在是一个微服务接口上面标注一个Feign注解即可)。即可完成对服务提供方的接口绑定,简化了使用Spring Cloud Ribbon时,自动封装服务调用客户端的开发量。
Feigh集成了Ribbon
- 利用Ribbon维护了MicroServiceCloud-Dept的服务列表信息,并且通过轮询实现了客户端的负载均衡,而与Ribbon不同的是,通过Feign只需要定义服务绑定接口且以声明式的方法,优雅而简单的实现了服务调用。
Ribbon和Feign的区别
- Ribbon和Feign都是用于调用其他服务的,不过方式不同。
- Ribbon:负载均衡(基于客户端)
Feign:负载均衡(基于服务端) - Ribbon RestFul风格
Feign 面向接口 - 1.启动类使用的注解不同
- Ribbon用的是@RibbonClient
- Feign用的是@EnableFeignClients。
- 2.服务的指定位置不同
- Ribbon是在@RibbonClient注解上声明
- Feign则是在定义抽象方法的接口中使用@FeignClient声明。
- 3.调用方式不同
- Ribbon需要自己构建http请求,模拟http请求然后使用RestTemplate发送给其他服务,步骤相当繁琐。
- Feign则是在Ribbon的基础上进行了一次改进,采用接口的方式,将需要调用的其他服务的方法定义成抽象方法即可,不需要自己构建http请求。不过要注意的是抽象方法的注解、方法签名要和提供服务的方法完全一致。
2、Feigh使用步骤
创建一个springcloud-consumer-dept-feign的maven空项目,这也是消费者,端口也是80,文件结构也一样,只是这个消费者使用Feign实现的负载均衡
Feign使用接口方法调用服务
- 在 springcloud-api项目的springcloud下创建service包
- 创建maven项目springcloud-api-feign,导入springcloud-api所有内容。
(不需要ribbon,把关于ribbon的删掉)
导入Feign依赖
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-feign</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
application.yml 和springcloud-consumer-dept-80项目的一模一样
主启动类
其他文件
在api模块写service层service接口,结合注解
import com.bupt.pojo.Dept;
import org.springframework.cloud.openfeign.FeignClient;
import org.springframework.stereotype.Component;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.PathVariable;
import org.springframework.web.bind.annotation.RequestBody;
import org.springframework.web.bind.annotation.RequestMapping;
import java.util.List;
@Component
@FeignClient(value = "SPRINGCLOUD-PROVIDER-DEPT") //在接口上添加注解就可以实现相关服务的负载均衡
public interface DeptClientService {
@RequestMapping("/dept/add")
public boolean addDept(@RequestBody Dept dept) ;
@GetMapping("/dept/get/{id}")
public Dept getDept(@PathVariable("id") Long id) ;
@GetMapping("/dept/list")
public List<Dept> queryAll() ;
}
在feign模块controller里写调用(把原来用ribbon实现的注释掉)
import com.bupt.pojo.Dept;
import com.bupt.service.DeptClientService;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.*;
import java.util.List;
@RestController
public class DeptConsumerController {
@Autowired // 用@Resource试试
private DeptClientService deptClientService = null;
@RequestMapping("/consumer/dept/get/{id}")
public Dept queryById(@PathVariable("id") long id){
return this.deptClientService.getDept(id);
}
@RequestMapping("/consumer/dept/add")
public boolean add(@RequestBody Dept dept){
return this.deptClientService.addDept(dept);
}
@RequestMapping("/consumer/dept/list")
public List<Dept> queryAll(){
return this.deptClientService.queryAll();
}
}
api模块主启动类
@EnableFeignClients(basePackages={"com.qia.springcloud"})
//@ComponentScan("com.qia.springcloud")//弹幕说没必要
两种方法(ribbon和feign)自己抉择
feign是加一层,可读性变高,性能变差
八、Hystrix
1、简介
分布式系统面临的问题
复杂分布式体系结构中的应用程序有数十个依赖关系,每个依赖关系在某些时候将不可避免的失败!
服务雪崩
多个微服务之间调用的时候,假设微服务A调用微服务B和微服务C,微服务B和微服务C又调用其他的微服务,这就是所谓的“扇出”,如果扇出的链路上某个微服务的调用响应时间过长,或者不可用,对微服务A的调用就会占用越来越多的系统资源,进而引起系统崩溃,所谓的“雪崩效应”。
对于高流量的应用来说,单一的后端依赖可能会导致所有服务器上的所有资源都在几十秒内饱和。比失败更糟糕的是,这些应用程序还可能导致服务之间的延迟增加,备份队列,线程和其他系统资源紧张,导致整个系统发生更多的级联故障,这些都表示需要对故障和延迟进行隔离和管理,以达到单个依赖关系的失败而不影响整个应用程序或系统运行。
我们需要,弃车保帅!
什么是Hystrix?
Hystrix是一个应用于处理分布式系统的延迟和容错的开源库,在分布式系统里,许多依赖不可避免的会调用失败,比如超时,异常等,Hystrix 能够保证在一个依赖出问题的情况下,不会导致整个体系服务失败,避免级联故障,以提高分布式系统的弹性。
“断路器”本身是一种开关装置,当某个服务单元发生故障之后,通过断路器的故障监控 (类似熔断保险丝) ,向调用方返回一个服务预期的,可处理的备选响应 (FallBack) ,而不是长时间的等待或者抛出调用方法无法处理的异常,这样就可以保证了服务调用方的线程不会被长时间,不必要的占用,从而避免了故障在分布式系统中的蔓延,乃至雪崩。
Hystrix能干嘛?
- 服务降级
- 服务熔断
- 服务限流
- 接近实时的监控
- …
Hystrix官网资料 https://github.com/Netflix/Hystrix/wiki
官网资料:
当一切正常时,请求流可以如下所示:
当许多后端系统中有一个潜在阻塞服务时,它可以阻止整个用户请求:
随着大容量通信量的增加,单个后端依赖项的潜在性会导致所有服务器上的所有资源在几秒钟内饱和。
应用程序中通过网络或客户端库可能导致网络请求的每个点都是潜在故障的来源。比失败更糟糕的是,这些应用程序还可能导致服务之间的延迟增加,从而备份队列、线程和其他系统资源,从而导致更多跨系统的级联故障。
当使用Hystrix包装每个基础依赖项时,上面的图表中所示的体系结构会发生类似于以下关系图的变化。每个依赖项是相互隔离的,限制在延迟发生时它可以填充的资源中,并包含在回退逻辑中,该逻辑决定在依赖项中发生任何类型的故障时要做出什么样的响应:
2、Hystrix:服务熔断
服务熔断是什么
熔断机制是对应雪崩效应的一种微服务链路保护机制。
(类似,熔断保险丝,断路器)
当扇出链路的某个微服务不可用或者响应时间太长时,会进行服务的降级,进而熔断该节点微服务的调用,快速返回错误的响应信息。检测到该节点微服务调用响应正常后恢复调用链路。在SpringCloud框架里熔断机制通过Hystrix实现。Hystrix会监控微服务间调用的状况,当失败的调用到一定阀值缺省是5秒内20次调用失败,就会启动熔断机制。熔断机制的注解是:@HystrixCommand。
服务熔断解决如下问题:
当所依赖的对象不稳定时,能够起到快速失败的目的;
快速失败后,能够根据一定的算法动态试探所依赖对象是否恢复。
入门案例
新建springcloud-provider-dept-hystrix-8001模块
并拷贝springcloud-provider-dept–8001内的pom.xml、resource和Java代码
进行初始化并调整
导入hystrix依赖
<!--hystrix-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-hystrix</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
application.yml
# Eureka配置:配置服务注册中心地址
eureka:
client:
service-url:
# 注册中心地址7001-7003
defaultZone: http://eureka7001.com:7001/eureka/,http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/
instance:
instance-id: springcloud-provider-dept-hystrix-8001 #修改Eureka上的默认描述信息
prefer-ip-address: true #改为true后默认显示的是ip地址而不再是localhost
主要
instance-id: springcloud-provider-dept-hystrix-8001
其中,application添加如下配置后,eureka注册中心会显示出链接的真实ip地址,而不再是主机地址。默认是:不显示 false
prefer-ip-address: true #改为true后 Eureka中的status就会显示真实ip地址
prefer-ip-address: false
prefer-ip-address: true
DeptController
import com.bupt.DeptService.DeptServiceImpl;
import com.bupt.pojo.Dept;
import com.netflix.hystrix.contrib.javanica.annotation.HystrixCommand;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.*;
import java.util.List;
//提供Restfull服务!!
@RestController
public class DeptController {
@Autowired
private DeptServiceImpl deptService;
@RequestMapping("/dept/add")
public boolean addDept(@RequestBody Dept dept) {
System.out.println(dept);
return deptService.addDept(dept);
}
/**
* 根据id查询部门信息
* 如果根据id查询出现异常,则走hystrixGet这段备选代码
* @param id
* @return
*/
@RequestMapping("/dept/get/{id}")
@HystrixCommand(fallbackMethod = "hystrixGet")
public Dept get(@PathVariable("id") Long id){
Dept dept = deptService.queryById(id);
if(dept == null){
//因为触发了这个异常才会调用下面的备选方案
throw new RuntimeException("这个id=>"+id+",不存在该用户,或信息无法找到~");
}
return dept;
}
//备选方案(熔断)
public Dept hystrixGet(@PathVariable("id") Long id){
return new Dept().setDeptno(id).setDname("这个id=>"+id+",没有对应的信息,null---@Hystrix~")
.setDb_source("mysql中不存在这个数据库");
}
// @GetMapping("/dept/get/{id}")
// public Dept getDept(@PathVariable("id") Long id) {
// Dept dept = deptService.queryById(id);
// if (dept == null) {
// throw new RuntimeException("Fail");
// }
// return dept;
// }
@GetMapping("/dept/list")
public List<Dept> queryAll() {
return deptService.queryall();
}
}
主启动类
添加对熔断的支持注解@EnableCircuitBreaker
@SpringBootApplication
@EnableEurekaClient//在服务启动后,自动注册到Eureka注册中心中
@EnableDiscoveryClient //注册进来的微服务,获取一些信息。服务发现,扩展内容
@EnableCircuitBreaker //添加Hystrix服务熔断 断路器的支持
public class DeptProviderHystrix_8001 {
public static void main(String[] args) {
SpringApplication.run(DeptProviderHystrix_8001.class,args);
}
}
测试:
启动注册中心,启动hystrix80端口
访问 localhost:8001/dept/get/id值
输入存在的id可查询到当前值
输入不存在的id时,前台页展示数据如下:
我们可以清楚的看到 当查询不存在的id时,将会自动采取Hystrix的备选方案去处理值。
成功运行后,Hystrix服务熔断环境搭建完成
application添加如下配置后,eureka注册中心会显示出链接的真实ip地址,而不再是主机地址。默认是:不显示 false
prefer-ip-address: true #改为true后 Eureka中的status就会显示真实ip地址
3、Hystrix:服务降级
什么是服务降级?
所谓降级,就是当某个服务出现异常之后,服务器将不再被调用,此时服务端可以自己准备一个本地的fallback回调,返回一个缺省值
这样做,虽然服务水平下降,但好歹可用,比直接挂掉要强
当某一时间内服务A的访问量暴增,而B和C的访问量较少,为了缓解A服务的压力,这时候需要B和C暂时关闭一些服务功能,去承担A的部分服务,从而为A分担压力,叫做服务降级。
服务降级需要考虑的问题
1)那些服务是核心服务,哪些服务是非核心服务
2)那些服务可以支持降级,那些服务不能支持降级,降级策略是什么
3)除服务降级之外是否存在更复杂的业务放通场景,策略是什么?
自动降级分类
1)超时降级:主要配置好超时时间和超时重试次数和机制,并使用异步机制探测回复情况
2)失败次数降级:主要是一些不稳定的api,当失败调用次数达到一定阀值自动降级,同样要使用异步机制探测回复情况
3)故障降级:比如要调用的远程服务挂掉了(网络故障、DNS故障、http服务返回错误的状态码、rpc服务抛出异常),则可以直接降级。降级后的处理方案有:默认值(比如库存服务挂了,返回默认现货)、兜底数据(比如广告挂了,返回提前准备好的一些静态页面)、缓存(之前暂存的一些缓存数据)
4)限流降级:秒杀或者抢购一些限购商品时,此时可能会因为访问量太大而导致系统崩溃,此时会使用限流来进行限制访问量,当达到限流阀值,后续请求会被降级;降级后的处理方案可以是:排队页面(将用户导流到排队页面等一会重试)、无货(直接告知用户没货了)、错误页(如活动太火爆了,稍后重试)。
入门案例
在springcloud-api模块下的service包中新建 降级服务类
(原service类崩了时运行的降级服务类)
DeptClientServiceFallBackFactory
(implements FallbackFactory)
//Hystrix 降级,当服务端关闭后的提示信息
@Component
public class DeptClientServiceFallbackFactory implements FallbackFactory {
@Override
public DeptClientService create(Throwable throwable) {
return new DeptClientService() {
@Override
public Dept queryById(Long id) {
return new Dept()
.setDeptno(id)
.setDname("id=>" +id+"没有对应的信息,客户端提供了降级的信息,这个服务现在已经关闭")
.setDb_source("已降级 未查找到数据");
}
@Override
public List<Dept> queryAll() {
return null;
}
@Override
public boolean addDept(Dept dept) {
return false;
}
};
}
}
修改原service类
@FeignClient(value=“xxx”,fallbackFactory=“降级的类”)
@Component //注册到spring容器中
//@FeignClient:微服务客户端注解,value:指定微服务的名字,这样就可以使Feign客户端直接找到对应的微服务
@FeignClient(value = "SPRINGCLOUD-PROVIDER-DEPT",fallbackFactory = DeptClientServiceFallBackFactory.class)//fallbackFactory指定降级配置类
public interface DeptClientService {
@GetMapping("/dept/get/{id}")
public Dept queryById(@PathVariable("id") Long id);
@GetMapping("/dept/list")
public List<Dept> queryAll();
@GetMapping("/dept/add")
public Boolean addDept(Dept dept);
}
在application.yml中开启降级
# 开启降级feign.hystrix
feign:
hystrix:
enabled: true
启动7001项目、启动8001项目(正常的,不是Hystrix的那个)、然后再启动feign的80项目
正常访问 http://localhost/consumer/dept/get/1
访问一个不存在的数据
把8001服务提供者关闭,再次访问http://localhost/consumer/dept/get/1
说明了什么?说明了服务熔断是被动的,服务降级是手动的,但是开启服务降级后,没有关闭服务,访问一个不存在的数据,也会返回一个客户端自定义的返回结果,当把服务关闭后,访问任何请求都是由客户端自定义的结果。
小总结:
服务熔断:针对服务器的,某个服务连接超时或者异常的时候,引起熔断
服务降级:针对客户端,从整体网站请求负载考虑,当某个服务熔断或者关闭之后,服务不再被调用。此时在客户端,我们可以准备一个失败回调,FallbackFactory,返回一个默认的值(缺省值)。这样做,虽然服务水平下降,但好歹可用,比直接挂掉要强
4、Hystrix:Dashboard流监控
服务监控,与客户端有关,与服务端无关
新建springcloud-consumer-hystrix-dashboard模块
导入依赖
<!--Hystrix依赖-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-hystrix</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
<!--dashboard依赖-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-hystrix-dashboard</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
<!--Ribbon-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-ribbon</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
<!--Eureka-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-eureka</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
<!--实体类+web-->
<dependency>
<groupId>com.haust</groupId>
<artifactId>springcloud-api</artifactId>
<version>1.0-SNAPSHOT</version>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<!--热部署-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
</dependency>
application.yml
#Hystrix的dashboard流监控 端口
server:
port: 9001
启动类
@SpringBootApplication
@EnableHystrixDashboard // 开启Dashboard
public class DeptConsumerDashboard_9001 {
public static void main(String[] args) {
SpringApplication.run(DeptConsumerDashboard_9001.class,args);
}
}
服务端需要有被监控的依赖
查看springcloud-provider-dept-hystrix-8001服务端是否有监控相关依赖actuator
启动注册中心,启动DeptProviderHystrix_8001服务提供者,启动当前9001监控端口
访问localhost:9001/hystrix,可以看到监控页面
(豪猪:学名 Hystrix brachyura subcristata)
当前配置还不足以监控,所以需在8001服务端添加配置
切换到 springcloud-provider-dept-hystrix-8001项目
在DeptProviderHystrix_8001 启动类中 添加 dashboard监控 配置,配合监控使用
@SpringBootApplication
@EnableEurekaClient//在服务启动后,自动注册到Eureka注册中心中
@EnableDiscoveryClient //注册进来的微服务,获取一些信息。服务发现,扩展内容
@EnableCircuitBreaker //添加Hystrix服务熔断 断路器的支持
public class DeptProviderHystrix_8001 {
public static void main(String[] args) {
SpringApplication.run(DeptProviderHystrix_8001.class,args);
}
//增加一个servlet,配合dashboard监控使用,固定的代码 http://localhost:8001/actuator/hystrix.stream访问监控
@Bean
public ServletRegistrationBean hystrixMetricsStreamServlet(){
ServletRegistrationBean registrationBean = new ServletRegistrationBean(new HystrixMetricsStreamServlet());//注册监控servlet的bean
registrationBean.addUrlMappings("/actuator/hystrix.stream");//添加访问路径
return registrationBean;
}
}
主要监控的是客户端调用服务提供者的情况,判断是否发生熔断等情况
启动7001项目,启动9001项目,启动hystrix的8001项目,然后访问http://localhost:8001/dept/get/1,有返回数据即可
然后访问http://localhost:8001/actuator/hystrix.stream,会得到一些数据流
在http://localhost:9001/hystrix,填入以下信息即可
监控的本质是在监控请求信息
回顾这张图
(注册 eureka,断路器监控 hystrix的dashboard)
总结一下监控配置的步骤:
一、写监控页面
1、创建springcloud-consumer-hystrix-dashboard项目,复制springcloud-consumer-dept-80项目所有依赖,导入Hystrix和dashboard依赖
2、编写application.yml端口配置
3、配置监控的启动类,配置监控注解
二、放入监控
4、切换至hystrix8001服务提供者项目,查看是否有 actuator相关监控信息依赖
5、要监控流,需要在hystrix8001启动类中配置流监控
6、启动注册中心,hystrix8001服务,9001监控测试
九、Zuul:路由网关
1、概述
什么是Zuul?
Zuul包含了对请求的路由和过滤两个最主要的功能:
其中路由功能负责将外部请求转发到具体的微服务实例上,是实现外部访问统一入口的基础,而过滤器功能则负责对请求的处理过程进行干预,是实现请求校验,服务聚合等功能的基础。Zuul和Eureka进行整合, 将Zuu自身注册为Eureka服务治理下的应用,同时从Eureka中获得其他微服务的消息,也即以后的访问微服务都是通过Zuul跳转后获得。
注意:Zuul服务最终还是会注册进Eureka
提供:代理+路由+过滤 三大功能
Zuul能干嘛
- 路由
- 过滤
官网文档 https://github.com/Netflix/zuul
我们为什么要建立Zuul?
Netfix API流量的数量和多样性有时会导致生产问题迅速出现而没有警告。我们需要一个允许我们快速改支行为以对这些情况做出反应的系统。
Zuul使用了各种不同类型的过滤器,这使我们能够快速灵活地将功能应用于边缘服务。这些过滤器帮助我们执行以下功能 :
- 身份验证和安全性识别每个资源的身份验证要求,井拒绝不满足要求的请求。
- 见解和监控在边缘跟族有意义的数据和统计信息,以便为我们提供准确的生产规图。
- 动态路由根据需要将请求动态路由到不同的后端群集
- 压力测试逐渐增加到群集的流量以评估性能。
- 减载-小每种类型的清求分配容量,并丢弃超出限制的请求。
- 静态响应处理-直接在边缘构建一 些响应。而不是将其转发到内部集群
- 多区域弹性在AWS区域之间路由请求,以多样化我们的ELB使用并将我们的优势拉近我们的成员
2、项目搭建
上代码
新建一个模块springcloud-zuul-9527
导入 springcloud-consumer-hystrix-dashboard 项目所有依赖,并加上Zuul依赖
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-zuul</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
application.yml
server:
port: 9527
spring:
application:
name: springcloud-zuul
eureka:
client:
service-url:
defaultZone: http://localhost:7001/eureka/,http://localhost:7002/eureka/,http://localhost:7003/eureka/
instance:
#修改Eureka中status的默认描述信息。不配置默认为DESKTOP-XXX描述
instance-id: zuul9527.com #自定义名称
prefer-ip-address: true #改为true后 Eureka中的status就会显示真实ip地址
info: #链接点开后显示的info信息
app.name: kuang-springcloud
company.name: blog.kuangstudy.com
给zuul也设置一个域名,方便理解
在C:\Windows\System32\drivers\etc\hosts 模拟zuul网关
127.0.0.1 www.kuangstudy.com
1、代理
主启动类
@SpringBootApplication
@EnableZuulProxy // 代理
public class DeptProvider_8001 {
public static void main(String[] args) {
SpringApplication.run(DeptProvider_8001.class,args);
}
}
启动注册中心,启动服务提供者8001,启动9527
先访问eureka页面,发现路由也被注册进来了
然后访问服务
用http://localhost:8001/dept/get/1访问正常
用路由访问试试
访问 http://www.kuangstudy.com:9527/springcloud-provider-dept/dept/get/1
(此处服务名记得大写改成小写)
成功
2、路由
用路由网关访问,可以防止直接访问原来的localhost:8001等,隐藏域名,避免暴露真实的微服务
此时,我们的项目路径中已暴露出真实的微服务地址(服务名),还需要进行修改配置。
在application.yml 配置zuul网关
zuul:
routes:
mydept.serviceId: springcloud-provider-dept
mydept.path: /mydept/**
#之前的查询链接地址 http://www.kuangstudy.com:9527/springcloud-provider-dept/dept/get/1
#现在的查询链接地址,配置后为 http://www.kuangstudy.com:9527/mydept/dept/get/1
#两者都皆可访问(原路径+现配路径)。配置自定义的前缀后 可不让客户端知道真实的ip地址
重启路由网关模块这个服务
访问http://www.kuangstudy.com:9527/mydept/dept/get/1/dept/get/2
3、过滤
此时,我们自己配置的这个路径可以成功访问,但原路径也可以访问,我们应该让原路径无法访问,只能用我们配置的路径访问
application.yml
zuul:
routes:
mydept.serviceId: springcloud-provider-dept
mydept.path: /mydept/**
# ignored-services: springcloud-provider-dept
ignored-services: "*"
#加上此配置后,原路径不能访问(springcloud-provider-dept/dept/get/6),只能通过自定义的规则路径访问
#ignored-services: springcloud-provider-dept
#星号(*) 隐藏全部的项目真实名字
prefix: /kuang #设置公共的访问地址前缀 配置后链接为:www.kuangstudy.com:9527/kuang/mydept/dept/get/3
重启访问设置成功
十、SpringCloud Config分布式配置
0、概述
分布式系统面临的 —— 配置文件的问题
微服务意味着要将单体应用中的业务拆分成一个个子服务, 每个服务的粒度相对较小,因此系统中会出现大量的服务,由于每个服务都需要必要的配置信息才能运行,所以一套集中式的,动态的配置管理设施是必不可少的。
SpringCloud提供了ConfigServer来解决这个问题,我们每一个微服务自己带着一个application.yml,那上百的的配置文件要修改起来,岂不是要发疯
什么是Springcloud config分布式配置中心
Spring Cloud Config为微服务架构中的微服务提供集中化的外部配置支持,配置服务器为各个不同微服务应用的所有环节提供了一个中心化的外部配置。
Spring Cloud Config 分为服务端和客户端两部分;
服务端也称为分布式配置中心,它是一 个独立的微服务应用,用来连接配置服务器并为客户端提供获取配置信息,加密,解密信息等访问接口。
客户端则是通过指定的配置中心来管理应用资源,以及与业务相关的配置内容,并在启动的时候从配置中心获取和加载配置信息。配置服务器默认采用git来存储配置信息,这样就有助于对环境配置进行版本管理。并且可以通过git客户端工具来方便的管理和访问配置内容。
SpringCloud config分布式配置中心能干嘛
- 集中管理配置文件
- 不同环境,不同配置,动态化的配置更新,分环境部署,比如/dev /test/ /prod /beta /release
- 运行期间动态调整配置,不再需要在每个服务部署的机器上编写配置文件,服务会向配置中心统一拉取配置自己的信息。
- 当配置发生变动时,服务不需要重启,即可感知到配置的变化,井应用新的配置
- 将配置信息以REST接口的形式暴露
spring cloud config 分布式配置中心与GitHub整合
由于spring cloud config 默认使用git来存储配置文件 (也有其他方式,比如自持SVN 和本地文件),但是最推荐的还是git ,而且使用的是 http / https 访问的形式。
1、Config:Git环境搭建
法一:idea关联账户
法二:git客户端或者网页(码云)
1、创建仓库
点击新建
点击创建
成功
2、把仓库放到本地【最终用的是https!】
新建一个文件夹GIT来放本地仓库
打开终端,克隆复制的SSH地址
(需下载git客户端)
失败,查看git命令大全
发现用ssh要生成私钥才能使用
我们改用https 成功
3、编写一个application.yml文件
# 多文档块实现
spring:
profiles:
active: dev
---
spring:
profiles: dev # 限制开发环境
application:
name: springcloud-config-dev
---
spring:
profiles: test # 限制开发环境
application:
name: springcloud-config-test
将修改的内容更新到git上,记得进入终端的我们的config目录再执行操作
$ git add .
$ git status
$ git commit -m "first commit"
$ git push origin master
更新成功
2、Config:服务端(3344)连接Git配置
新建maven项目模块 springcloud-config-server-3344
导入依赖
<!--服务端连接Git-->
<artifactId>springcloud-config-server-3344</artifactId>
<dependencies>
<!--springboot启动-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<!--springcloud-config的配置-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-config-server</artifactId>
<version>2.1.1.RELEASE</version>
</dependency>
<!--监控信息 可不加-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-actuator</artifactId>
</dependency>
</dependencies>
application.yml
server:
port: 3344
spring:
application:
name: springcloud-config-server
#连接远程的仓库
cloud:
config:
server:
git:
uri: https://gitee.com/xxx/springcloud-config.git #自己远程仓库的https地址
# 通过 config-server可以连接到git,访问其中的资源以及配置~
启动类
@SpringBootApplication
@EnableConfigServer //开启配置服务
public class Config_Server_3344 {
public static void main(String[] args) {
SpringApplication.run(Config_Server_3344.class,args);
}
}
启动Config_Server_3344端口,看看能不能得到git上仓库的文件
浏览器输入 localhost:3344/application-dev.yml
可以看到已获得git仓库中application.yml的配置
(访问http://localhost:3344/application/test/master(master是label,label是分支的意思))
http服务具有以下格式的资源:
/{application}/{profile}{/{label}}
/{application}-{profile}.yml
/{label}/{application}-{profile}.yml
/{application}-{profile}.properties
/{label}/{application}-{peofile}.properties
小结:
通过 config-server 可以连接到git,访问其中的资源以及配置
3、Config:客户端(3355)连接服务端访问远程
在git文件夹下新建一个config-client.yml文件
#spring的配置
spring:
profiles:
active: dev
#springboot启动多环境的配置
---
server:
port: 8201
#spring的配置
spring:
profiles: dev
application:
name: springcloud-config-client-dev
#Eureka的配置。 服务注册到Eureka中,需要一个路径地址
eureka:
client:
service-url:
defaultZone: http://eureka7001.com:7001/eureka/
---
server:
port: 8202
#spring的配置
spring:
profiles: test
application:
name: springcloud-config-client-test
#Eureka的配置。 服务注册到Eureka中,需要一个路径地址
eureka:
client:
service-url:
defaultZone: http://eureka7001.com:7001/eureka/
发布到远程仓库上,等会启动后手动选择配置文件来选择开启哪个注册中心
配置文件发布到远程成功
新建Maven项目 springcloud-config-client-3355
导入依赖
<!--客户端连接服务端访问远程 3355端口-->
<artifactId>springcloud-config-client-3355</artifactId>
<dependencies>
<!--springboot启动-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<!--springcloud-config启动的配置 和服务端的不同-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-config</artifactId>
<version>2.1.1.RELEASE</version>
</dependency>
<!--监控信息 可不加-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-actuator</artifactId>
</dependency>
</dependencies>
resources下创建application.yml和bootstrap.yml配置文件
bootstrap.yml是系统级别的配置
#系统级别的配置
spring:
cloud:
config:
name: config-client
profile: test
label: master
uri: http://localhost:3344
application.yml是用户级别的配置
# 用户级别的配置
spring:
application:
name: springcloud-config-client
创建controller包下的ConfigClientController用于测试
@RestController
public class ConfigClientController {
@Value("${spring.application.name}")
private String applicationName; //获取微服务名称
@Value("${eureka.client.service-url.defaultZone}")
private String eurekaServer; //获取Eureka服务
@Value("${server.port}")
private String port; //获取服务端的端口号
@RequestMapping("/config")
public String getConfig(){
return "applicationName:"+applicationName +
"eurekaServer:"+eurekaServer +
"port:"+port;
}
}
主启动类
@SpringBootApplication
public class ConfigClient {
public static void main(String[] args) {
SpringApplication.run(ConfigClient.class,args);
}
}
启动服务端Config_server_3344 再启动客户端ConfigClient
访问:http://localhost:8201/config/
4、Config:远程配置实战测试
项目中那么多模块,一个个打开修改里面的配置文件太麻烦了,我们试试把他们放到git的远程仓库上来读取,可以方便统一修改
本地新建config-eureka.yml和config-dept.yml并提交到码云仓库
config-eureka.yml
#启动环境选择的配置
spring:
profiles:
active: dev
---
server:
port: 7001
#spring的配置
spring:
profiles: dev
application:
name: springcloud-config-eureka-dev
#Eureka配置
eureka:
instance:
hostname: eureka7001.com #Eureaka服务端的实例名称
client:
register-with-eureka: false #表示是否向Eureka注册中心注册自己
fetch-registry: false #如果fetch-registry为false,则表示自己为注册中心
service-url: #监控页面
#单机:点进去参考源码,可看到默认的url端口配置为8761,我们设置为自己的端口。
#defaultZone: http://${eureka.instance.hostname}:${server.port}/eureka
#集群(除自身外 关联其他所有)
defaultZone: http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/
---
server:
port: 7001
#spring的配置
spring:
profiles: test
application:
name: springcloud-config-eureka-test
#Eureka配置
eureka:
instance:
hostname: eureka7001.com #Eureaka服务端的实例名称
client:
register-with-eureka: false #表示是否向Eureka注册中心注册自己
fetch-registry: false #如果fetch-registry为false,则表示自己为注册中心
service-url: #监控页面
#单机:点进去参考源码,可看到默认的url端口配置为8761,我们设置为自己的端口。
#defaultZone: http://${eureka.instance.hostname}:${server.port}/eureka
#集群(除自身外 关联其他所有)
defaultZone: http://eureka7002.com:7002/eureka/,http://eureka7003.com:7003/eureka/
config-dept.yml
#启动环境选择的配置
spring:
profiles:
active: dev
---
server:
port: 8001
#mybatis配置
mybatis:
type-aliases-package: com.lemon.springcloud.pojo
config-location: classpath:mybatis/mybatis-config.xml
mapper-locations: classpath:mybatis/mapper/*.xml
#spring的配置
spring:
profiles: dev
application:
name: springcloud-config-dept-dev
#数据源的配置
datasource:
type: com.alibaba.druid.pool.DruidDataSource #数据源为druid
driver-class-name: com.mysql.jdbc.Driver #数据库驱动
url: jdbc:mysql://localhost:3306/springcloud1?useUnicode=true&characterEncoding=utf-8&servetTimeZone=Asia/Shanghai
username: root
password: 12345678
#Eureka的配置。 服务注册到Eureka中,需要一个路径地址
eureka:
client:
service-url:
defaultZone: http://localhost:7001/eureka/,http://localhost:7002/eureka/,http://localhost:7003/eureka/
instance:
#修改Eureka中status的默认描述信息。不配置默认为DESKTOP-XXX描述
instance-id: springcloud-provider-dept8001
prefer-ip-address: true #改为true后 Eureka中的status就会显示真实ip地址
#info配置 Eureka的status的xx/info链接点开后的info监控信息。没有太大意义
info:
app.name: ti zi zui bang,jiayou
company.name: tizi.lemon.com
test.name: hahah test
---
server:
port: 8001
#mybatis配置
mybatis:
type-aliases-package: com.lemon.springcloud.pojo
config-location: classpath:mybatis/mybatis-config.xml
mapper-locations: classpath:mybatis/mapper/*.xml
#spring的配置
spring:
profiles: test
application:
name: springcloud-config-dept-test
#数据源的配置
datasource:
type: com.alibaba.druid.pool.DruidDataSource #数据源为druid
driver-class-name: com.mysql.jdbc.Driver #数据库驱动
url: jdbc:mysql://localhost:3306/springcloud2?useUnicode=true&characterEncoding=utf-8&servetTimeZone=Asia/Shanghai
username: root
password: 12345678
#Eureka的配置。 服务注册到Eureka中,需要一个路径地址
eureka:
client:
service-url:
defaultZone: http://localhost:7001/eureka/,http://localhost:7002/eureka/,http://localhost:7003/eureka/
instance:
#修改Eureka中status的默认描述信息。不配置默认为DESKTOP-XXX描述
instance-id: springcloud-provider-dept8001
prefer-ip-address: true #改为true后 Eureka中的status就会显示真实ip地址
#info配置 Eureka的status的xx/info链接点开后的info监控信息。没有太大意义
info:
app.name: ti zi zui bang,jiayou
company.name: tizi.lemon.com
test.name: hahah test
然后提交到git远程仓库
接下来对本地配置文件进行改造
采用新建项目来演示,方便参考对比
创建Maven项目springcloud-config-eureka-7001远程访问仓库实现注册中心
导入pom依赖
<!--通过远程中的Eureka配置 实现仓库中代码的调用实现Eureka注册中心-->
<artifactId>springcloud-config-eureka-7001</artifactId>
<dependencies>
<!--eureka服务提供者包-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-eureka-server</artifactId>
<version>1.4.6.RELEASE</version>
</dependency>
<!--springcloud-config启动的配置-->
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-config</artifactId>
<version>2.1.1.RELEASE</version>
</dependency>
</dependencies>
复制 springcloud-eureka-7001 项目所有的内容,删掉application.yml所有配置,因为此配置已经在git远程仓库中配置
添加bootstrap.yml来配置连接远程
# 系统级别的配置
spring:
cloud:
config:
name: config-client # 需要从git上读取的资源名称,不要后缀
profile: dev #dev环境端口:8201 test环境端口:8202
label: master #需要在git上的哪个分支拿
#连接到3344服务,中转站的形式连接服务端访问远程地址
uri: http://localhost:3344
在application.yml中配置服务名即可,用于告诉别人我是谁
spring:
application:
name: sorubgckiyd-config-eureka-7001
先启动3344,查看是否能访问远程配置成功
(客户端是走本地配置,不需要启动类上开启配置,服务端要)
再启动7001,只要能启动成功,即证明访问远程成功
此时 已读取到远程仓库中Eureka的相关信息
创建Maven项目 springcloud-config-dept-8001 远程访问仓库实现8001服务提供者
复制 springcloud-provider-dept-8001 项目所有的内容及依赖
删掉application.yml所有配置,因为此配置已经在git远程仓库中配置
bootstrap.yml
#系统级的配置
# 系统级别的配置
spring:
cloud:
config:
name: config-dept # 需要从git上读取的资源名称,不要后缀
profile: dev #dev环境端口:8201 test环境端口:8202
label: master #需要在git上的哪个分支拿
#连接到3344服务,中转站的形式连接服务端访问远程地址
uri: http://localhost:3344
application.yml
spring:
application:
name: springcloud-config-dept-8001
启动3344服务端 ,config-eureka-7001注册中心,当前8001服务提供者
可以看到,通过远程访问git,也获取到了相应的数据
5、注意:git 的 push
将修改的内容更新到git上,记得进入终端的我们的config目录再执行操作
$ git add .
$ git status
$ git commit -m "first commit"
$ git push origin master