title: Day71-分布式RPC框架Apache Dubbo
date: 2021-05-14 14:11:02
author: Liu_zimo
软件架构的演进过程
软件架构的发展经历了由单体架构、垂直架构、SOA架构到微服务架构的演进过程,下面我们分别了解一下这几个架构
单体架构
- 架构说明:全部功能集中在一个项目内(All in one)
- 架构优点:架构简单,前期开发成本低、开发周期短,适合小型项目
- 架构缺点:
- 全部功能集成在一个工程中,对于大型项目不易开发、扩展和维护
- 技术栈受限,只能使用—种语言开发
- 系统性能扩展只能通过扩展集群节点,成本高
垂直架构
- 架构说明:按照业务进行切割,形成小的单体项目
- 架构优点:技术栈可扩展(不同的系统可以用不同的编程语言编写)
- 架构缺点:
- 功能集中在一个项目中,不利于开发、扩展、维护
- 系统扩张只能通过集群的方式
- 项目之间功能冗余、数据冗余、耦合性强
SOA架构
SOA全称为Service-Oriented Architecture,即面向服务的架构。它可以根据需求通过网络对松散耦合的粗粒度应用组件(服务)进行分布式部署、组合和使用。一个服务通常以独立的形式存在于操作系统进程中
站在功能的角度,把业务逻辑抽象成可复用的服务,通过服务的编排实现业务的快速再生,目的:把原先固有的业务功能转变为通用的业务服务,实现业务逻辑的快速复用
- 架构说明:将重复功能或模块抽取成组件的形式,对外提供服务,在项目与服务之间使用ESB(企业服务总线)的形式作为通信的桥梁
- 架构优点:
- 重复功能或模块抽取为服务,提高开发效率
- 可重用性高
- 可维护性高
- 架构缺点:
- 各系统之间业务不同,很难确认功能或模块是重复的
- 抽取服务的粒度大
- 系统和服务之间耦合度高
微服务架构
- 架构说明:
- 将系统服务层完全独立出来,抽取为一个一个的微服务
- 抽取的粒度更细,遵循单—原则
- 采用轻量级框架协议传输
- 架构优点:
- 服务拆分粒度更细,有利于提高开发效率
- 可以针对不同服务制定对应的优化方案
- 适用于互联网时代,产品迭代周期更短
- 架构缺点:
- 粒度太细导致服务太多,维护成本高
- 分布式系统开发的技术成本高,对团队的挑战大
Apache Dubbo
Apache Dubbo是一款高性能的Java RPC框架。其前身是阿里巴巴公司开源的一个高性能、轻量级的开源Java RPC框架,可以和Spring框架无缝集成
RPC
RPC全称为remote procedure call,即远程过程调用。比如两台服务器A和B,A服务器上部署一个应用,B服务器上部署一个应用,A服务器上的应用想调用B服务器上的应用提供的方法,由于两个应用不在一个内存空间,不能直接调用,所以需要通过网络来表达调用的语义和传达调用的数据
需要注意的是RPC并不是一个具体的技术,而是指整个网络远程调用过程
RPC是一个泛化的概念,严格来说一切远程过程调用手段都属于RPC范畴。各种开发语言都有自己的RPC框架。Java中的RPC框架比较多,广泛使用的有RMI、Hessian、Dubbo等
Dubbo提供了三大核心能力:面向接口的远程方法调用,智能容错和负载均衡,以及服务自动注册和发现。
Dubbo官网地址: http://dubbo.apache.org
Dubbo架构
- 节点角色说明:
节点 | 角色名称 |
---|---|
Provide | 暴露服务的服务提供方 |
Consumer | 调用远程服务的服务消费方 |
Registry | 服务注册与发现的注册中心 |
Monitor | 统计服务的调用次数和调用时间的监控中心 |
Container | 服务运行容器 |
- 虚线都是异步访问,实线都是同步访问
- 蓝色虚线:在启动时完成的功能
- 灰色虚线(实线):都是程序运行过程中执行的功能
- 调用关系说明:
0. 服务容器负责启动,加载,运行服务提供者- 服务提供者在启动时,向注册中心注册自己提供的服务
- 服务消费者在启动时,向注册中心订阅自己所需的服务
- 注册中心返回服务提供者地址列表给消费者,如果有变更,注册中心将基于长连接推送变更数据给消费者
- 服务消费者,从提供者地址列表中,基于软负载均衡算法,选一台提供者进行调用,如果调用失败,再选另一台调用
- 服务消费者和提供者,在内存中累计调用次数和调用时间,定时每分钟发送一次统计数据到监控中心
服务注册中心Zookeeper
通过前面的Dubbo架构图可以看到,Registry(服务注册中心)在其中起着至关重要的作用。Dubbo官方推荐使用Zookeeper作为服务注册中心
介绍
Zookeeper是Apache Hadoop的子项目,是一个树型的目录服务,支持变更推送,适合作为Dubbo服务的注册中心,工业强度较高,可用于生产环境,并推荐使用
流程说明:
- 服务提供者(Provider)启动时:向
/dubbo/com.foo.BarService/providers
目录下写入自己的URL地址 - 服务消费者(Consumer)启动时:订阅
/dubbo/com.foo.BarService/providers
目录下的提供者URL地址。并向/dubbo/com.foo.BarService/consumers
目录下写入自己的URL地址 - 监控中心(Monitor)启动时:订阅
/dubbo/com.foo.BarService
目录下的所有提供者和消费者URL地址
安装
下载地址:http://archive.apache.org/dist/zookeeper/
- 安装步骤:
- 安装jdk
- 把zookeeper压缩包上传到Linux系统
- 解压压缩包
- tar -zxvf zookeeper-3.4.5.tar.gz
- 进入zookeeper-3.4.5目录,创建data目录
- mkdir /root/zookeeper-3.4.5/data
- 进入conf目录,把zoo_samzple.cfg改名为zoo.cfg
- cd conf、mv zoo_samzple.cfg zoo.cfg
- 打开zoo.cfg文件,修改data属性
- dataDir=/root/zookeeper-3.4.5/data
启动、停止Zookeeper
- 进入Zookeeper的bin目录,启动服务命令
./zkServer.sh start
- 停止服务命令
./zkServer.sh stop
- 查看服务状态
./zkServer.sh status
Dubbo快速入门
Dubbo作为一个RPC框架,其最核心的功能就是要实现跨网络的远程调用。本小节就是要创建两个应用一个作为服务的提供方,一个作为服务的消费方。通过Dubbo来实现服务消费方远程调用服务提供方的方法。
服务提供方开发
-
开发步骤
- 创建maven工程(打包方式为war)dubbodemo_provider,在pox.xml文件中导入坐标如下:
<?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd"> <modelVersion>4.0.0</modelVersion> <groupId>com.zimo</groupId> <artifactId>dubbo_demo_provider</artifactId> <version>1.0-SNAPSHOT</version> <packaging>war</packaging> <name>dubbo_demo_provider Maven Webapp</name> <!-- FIXME change it to the project's website --> <url>http://www.example.com</url> <properties> <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding> <maven.compiler.source>1.8</maven.compiler.source> <maven.compiler.target>1.8</maven.compiler.target> <spring.version>5.0.5.RELEASE</spring.version> </properties> <dependencies> <dependency> <groupId>org.springframework</groupId> <artifactId>spring-context</artifactId> <version>${spring.version}</version> </dependency> <dependency> <groupId>org.springframework</groupId> <artifactId>spring-beans</artifactId> <version>${spring.version}</version> </dependency> <dependency> <groupId>org.springframework</groupId> <artifactId>spring-webmvc</artifactId> <version>${spring.version}</version> </dependency> <dependency> <groupId>org.springframework</groupId> <artifactId>spring-jdbc</artifactId> <version>${spring.version}</version> </dependency> <dependency> <groupId>org.springframework</groupId> <artifactId>spring-aspects</artifactId> <version>${spring.version}</version> </dependency> <dependency> <groupId>org.springframework</groupId> <artifactId>spring-jms</artifactId> <version>${spring.version}</version> </dependency> <dependency> <groupId>org.springframework</groupId> <artifactId>spring-context-support</artifactId> <version>${spring.version}</version> </dependency> <!-- dubbo相关 --> <dependency> <groupId>com.alibaba</groupId> <artifactId>dubbo</artifactId> <version>2.6.0</version> </dependency> <dependency> <groupId>org.apache.zookeeper</groupId> <artifactId>zookeeper</artifactId> <version>3.4.7</version> </dependency> <dependency> <groupId>com.github.sgroschupf</groupId> <artifactId>zkclient</artifactId> <version>0.1</version> </dependency> <dependency> <groupId>javassist</groupId> <artifactId>javassist</artifactId> <version>3.12.1.GA</version> </dependency> <dependency> <groupId>com.alibaba</groupId> <artifactId>fastjson</artifactId> <version>1.2.47</version> </dependency> </dependencies> <build> <plugins> <plugin> <groupId>org.apache.maven.plugins</groupId> <artifactId>maven-compiler-plugin</artifactId> <version>2.3.2</version> <configuration> <source>1.8</source> <target>1.8</target> </configuration> </plugin> <plugin> <groupId>org.apache.tomcat.maven</groupId> <artifactId>tomcat7-maven-plugin</artifactId> <configuration> <!--指定端口--> <port>8081</port> <!--请求路径--> <path>/</path> </configuration> </plugin> </plugins> </build> </project>
- 配置web.xml文件
<!DOCTYPE web-app PUBLIC "-//Sun Microsystems, Inc.//DTD Web Application 2.3//EN" "http://java.sun.com/dtd/web-app_2_3.dtd" > <web-app> <display-name>Archetype Created Web Application</display-name> <!-- 配置spring框架监听器 --> <context-param> <param-name>contextConfigLocation</param-name> <param-value>classpath:applicationContext*.xml</param-value> </context-param> <listener> <listener-class>org.springframework.web.context.ContextLoaderListener</listener-class> </listener> </web-app>
- 创建服务接口
package com.zimo.service; /** * @author Liu_zimo * @version v0.1 by 2021/5/14 17:45 */ public interface HelloService { public String hello(String name); }
- 创建服务实现类
package com.zimo.service.impl; import com.alibaba.dubbo.config.annotation.Service; import com.zimo.service.HelloService; /** * @author Liu_zimo * @version v0.1 by 2021/5/14 17:52 */ @Service // 发布为服务 dubbo提供的Service注解 public class HelloServiceImpl implements HelloService { @Override public String hello(String name) { return "hello" + name; } }
- 注意:服务实现类上使用的Service注解是Dubbo提供的,用于对外发布服务
- 在src/main/resources下创建applicationContext-service.xml
<?xml version="1.0" encoding="UTF-8"?> <beans xmlns="http://www.springframework.org/schema/beans" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:dubbo="http://code.alibabatech.com/schema/dubbo" xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd http://code.alibabatech.com/schema/dubbo http://code.alibabatech.com/schema/dubbo/dubbo.xsd http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd"> <!--每个dubbo应用(服务和消费)都必须指定一个唯一的名称--> <dubbo:application name="dubbo_demo_provider"></dubbo:application> <!--指定服务的注册中心--> <dubbo:registry address="zookeeper://192.168.1.133:2181"></dubbo:registry> <!--配置协议端口--> <dubbo:protocol name="dubbo" port="208800"></dubbo:protocol> <!--指定包扫描--> <dubbo:annotation package="com.zimo.service.impl"></dubbo:annotation> </beans>
- 启动服务:tomcat7:run
服务消费方开发
-
开发步骤:
-
创建maven工程(打包方式为war)dubbo_demo_consumer,pom.xml配置和上面服务提供者相同,只需要将Tomcat插件的端口号改为8082即可
-
配置web.xml
<!DOCTYPE web-app PUBLIC "-//Sun Microsystems, Inc.//DTD Web Application 2.3//EN" "http://java.sun.com/dtd/web-app_2_3.dtd" > <web-app> <display-name>Archetype Created Web Application</display-name> <!--配置Servlet前端控制器--> <servlet> <servlet-name>springmvc</servlet-name> <servlet-class>org.springframework.web.servlet.DispatcherServlet</servlet-class> <!--指定加载的配置文件,通过参数contextConfigLoaction加载--> <init-param> <param-name>contextConfigLocation</param-name> <param-value>classpath:applicationContext-web.xml</param-value> </init-param> <load-on-startup>1</load-on-startup> </servlet> <servlet-mapping> <servlet-name>springmvc</servlet-name> <url-pattern>*.do</url-pattern> </servlet-mapping> </web-app>
-
将服务提供者工程中的HelloService接口复制到当前工程
-
编写Controller
package com.zimo.controller; import com.alibaba.dubbo.config.annotation.Reference; import com.zimo.service.HelloService; import org.springframework.stereotype.Controller; import org.springframework.web.bind.annotation.RequestMapping; import org.springframework.web.bind.annotation.ResponseBody; /** * @author Liu_zimo * @version v0.1 by 2021/5/17 10:17 */ @Controller @RequestMapping("/hello") public class HelloController { @Reference // 查找服务 private HelloService helloService; @RequestMapping("/say") @ResponseBody public String hello(String name){ return helloService.hello(name); } }
- 注意:Controller中注入HelloService使用的是Dubbo提供的@Reference注解
-
在src/main/resources下创建applicationContext-web.xml
<?xml version="1.0" encoding="UTF-8"?> <beans xmlns="http://www.springframework.org/schema/beans" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:dubbo="http://code.alibabatech.com/schema/dubbo" xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd http://code.alibabatech.com/schema/dubbo http://code.alibabatech.com/schema/dubbo/dubbo.xsd "> <dubbo:application name="dubbo_demo_consumer"></dubbo:application> <dubbo:registry address="zookeeper://192.168.1.133:2181"></dubbo:registry> <dubbo:annotation package="com.zimo.controller"></dubbo:annotation> </beans>
-
启动服务:tomcat7:run
-
思考
- 上面的Dubbo入门案例中我们是将HelloService接口从服务提供者工程(dubbo_demo_provider)复制到服务消费者工程(dubbo_demo_consumer)中,这种做法是否合适?还有没有更好的方式?
- 这种做法显然是不好的,同一个接口被复制了两份,不利于后期维护。更好的方式是单独创建一个maven工程,将此接口创建在这个maven工程中。需要依赖此接口的工程只需要在自己工程的pom.xml文件中引入maven坐标即可
- 在服务消费者工程(dubbo_demo_consumer)中只是引用了HelloService接口,并没有提供实现类,Dubbo是如何做到远程调用的?
- Dubbo底层是基于代理技术为HelloService接口创建代理对象,远程调用是通过此代理对象完成的。可以通过开发工具的debug功能查看此代理对象的内部结构。另外,Dubbo实现网络传输底层是基于Netty框架完成的。
- 上面的Dubbo入门案例中我们使用Zookeeper作为服务注册中心,服务提供者需要将自己的服务信息注册到Zookeeper,服务消费者需要从Zookeeper订阅自己所需要的服务,此时Zookeeper服务就变得非常重要了,那如何防止Zookeeper单点故障呢?
- Zookeeper其实是支持集群模式的,可以配置Zookeeper集群来达到Zookeeper服务的高可用,防止出现单点故障。
Dubbo管理控制台
我们在开发时,需要知道Zookeeper注册中心都注册了哪些服务,有哪些消费者来消费这些服务。我们可以通过部署一个管理中心来实现。其实管理中心就是一个wpb应用,部署到tomcat即可。
安装
- 将资料中的dubbo-admin-2.6.0.war文件复制到tomcat的webapps目录下
- 启动tomcat,此war文件会自动解压
- 修改WEB-INF下的dubbo.properties文件,注意dubbo.registry.address对应的值需要对应当前使用的Zookeeper的ip地址和端口号
- dubbo.registry.address=zookeeper://localhost:2181
- dubbo.admin.root.password=root
- dubbo.admin.guest.password=guest
- 重启tomcat
使用
- 访问http://localhost:8080/dubbo-admin-2.6.0,输入用户名和密码