基础知识
1.
为什么要用
Dubbo
?
随着服务化的进一步发展,服务越来越多,服务之间的调用和依赖关系也越来越复杂,诞生了面向
服务的架构体系
(SOA)
,也因此衍生出了一系列相应的技术,如对服务提供、服务调用、连接处
理、通信协议、序列化方式、服务发现、服务路由、日志输出等行为进行封装的服务框架。就这样
为分布式系统的服务治理框架就出现了,
Dubbo
也就这样产生了。
2. Dubbo
是什么?
Dubbo
是一款高性能、轻量级的开源
RPC
框架,提供服务自动注册、自动发现等高效服务治理方
案, 可以和
Spring
框架无缝集成。
3. Dubbo
的使用场景有哪些?
透明化的远程方法调用:就像调用本地方法一样调用远程方法,只需简单配置,没有任何
API
侵
入。
软负载均衡及容错机制:可在内网替代
F5
等硬件负载均衡器,降低成本,减少单点。
服务自动注册与发现:不再需要写死服务提供方地址,注册中心基于接口名查询服务提供者的
IP
地
址,并且能够平滑添加或删除服务提供者。
4. Dubbo
核心功能有哪些?
Remoting
:网络通信框架,提供对多种
NIO
框架抽象封装,包括
“
同步转异步
”
和
“
请求
-
响应
”
模式
的信息交换方式。
Cluster
:服务框架,提供基于接口方法的透明远程过程调用,包括多协议支持,以及软负载均
衡,失败容错,地址路由,动态配置等集群支持。
Registry
:服务注册,基于注册中心目录服务,使服务消费方能动态的查找服务提供方,使地址透
明,使服务提供方可以平滑增加或减少机器。
5. Dubbo
核心组件有哪些?
Provider
:暴露服务的服务提供方
Consumer
:调用远程服务消费方
Registry
:服务注册与发现注册中心
Monitor
:监控中心和访问调用统计
Container
:服务运行容器
6. Dubbo
服务器注册与发现的流程?
服务容器
Container
负责启动,加载,运行服务提供者。
服务提供者
Provider
在启动时,向注册中心注册自己提供的服务。
服务消费者
Consumer
在启动时,向注册中心订阅自己所需的服务。
注册中心
Registry
返回服务提供者地址列表给消费者,如果有变更,注册中心将基于长连接推送变
更数据给消费者。
服务消费者
Consumer
,从提供者地址列表中,基于软负载均衡算法,选一台提供者进行调用,如
果调用失败,再选另一台调用。
服务消费者
Consumer
和提供者
Provider
,在内存中累计调用次数和调用时间,定时每分钟发送一
次统计数据到监控中心
Monitor
。
架构设计
7. Dubbo
的整体架构设计有哪些分层
?
接口服务层(
Service
):该层与业务逻辑相关,根据
provider
和
consumer
的业务设计对应的接
口和实现
配置层(
Confifig
):对外配置接口,以
ServiceConfifig
和
ReferenceConfifig
为中心
服务代理层(
Proxy
):服务接口透明代理,生成服务的客户端
Stub
和 服务端的
Skeleton
,以
ServiceProxy
为中心,扩展接口为
ProxyFactory
服务注册层(
Registry
):封装服务地址的注册和发现,以服务
URL
为中心,扩展接口为
RegistryFactory
、
Registry
、
RegistryService
路由层(
Cluster
):封装多个提供者的路由和负载均衡,并桥接注册中心,以
Invoker
为中心,
扩展接口为
Cluster
、
Directory
、
Router
和
LoadBlancce
监控层(
Monitor
):
RPC
调用次数和调用时间监控,以
Statistics
为中心,扩展接口为
MonitorFactory
、
Monitor
和
MonitorService
远程调用层(
Protocal
):封装
RPC
调用,以
Invocation
和
Result
为中心,扩展接口为
Protocal
、
Invoker
和
Exporter
信息交换层(
Exchange
):封装请求响应模式,同步转异步。以
Request
和
Response
为中心,
扩展接口为
Exchanger
、
ExchangeChannel
、
ExchangeClient
和
ExchangeServer
网络 传输 层(
Transport
):抽象
mina
和
netty
为统一接口,以
Message
为中心,扩展接口为
Channel
、
Transporter
、
Client
、
Server
和
Codec
数据序列化层(
Serialize
):可复用的一些工具,扩展接口为
Serialization
、
ObjectInput
、
ObjectOutput
和
ThreadPool
8. Dubbo Monitor
实现原理?
Consumer
端在发起调用之前会先走
fifilter
链;
provider
端在接收到请求时也是先走
fifilter
链,然
后才进行真正的业务逻辑处理。默认情况下,在
consumer
和
provider
的
fifilter
链中都会有
Monitorfifilter
。
1. MonitorFilter
向
DubboMonitor
发送数据
2. DubboMonitor
将数据进行聚合后(默认聚合
1min
中的统计数据)暂存到
ConcurrentMap<Statistics, AtomicReference> statisticsMap
,然后使用一个含有
3
个线程(线
程名字:
DubboMonitorSendTimer
)的线程池每隔
1min
钟,调用
SimpleMonitorService
遍历
发送
statisticsMap
中的统计数据,每发送完毕一个,就重置当前的
Statistics
的
AtomicReference
3. SimpleMonitorService
将这些聚合数据塞入
BlockingQueue queue
中(队列大写为
100000
)
4. SimpleMonitorService
使用一个后台线程(线程名为:
DubboMonitorAsyncWriteLogThread
)
将
queue
中的数据写入文件(该线程以死循环的形式来写)
5. SimpleMonitorService
还会使用一个含有
1
个线程(线程名字:
DubboMonitorTimer
)的线程
池每隔
5min
钟,将文件中的统计数据画成图表
分布式框架
9. Dubbo
类似的分布式框架还有哪些?
比较著名的就是
Spring Cloud
。
10. Dubbo
和
Spring Cloud
有什么关系?
Dubbo
是
SOA
时代的产物,它的关注点主要在于服务的调用,流量分发、流量监控和熔断。而
Spring Cloud
诞生于微服务架构时代,考虑的是微服务治理的方方面面,另外由于依托了
Spring
、
Spring Boot
的优势之上,两个框架在开始目标就不一致,
Dubbo
定位服务治理、
Spring Cloud
是打造一个生态。
11. Dubbo
和
Spring Cloud
有什么哪些区别?
Dubbo
底层是使用
Netty
这样的
NIO
框架,是基于
TCP
协议传输的,配合以
Hession
序列化完
成
RPC
通信。
Spring Cloud
是基于
Http
协议
Rest
接口调用远程过程的通信,相对来说
Http
请求会有更大的报
文,占的带宽也会更多。但是
REST
相比
RPC
更为灵活,服务提供方和调用方的依赖只依靠一纸
契约,不存在代码级别的强依赖,这在强调快速演化的微服务环境下,显得更为合适,至于注重通
信速度还是方便灵活性,具体情况具体考虑。
12. Dubbo
和
Dubbox
之间的区别?
Dubbox
是继
Dubbo
停止维护后,当当网基于
Dubbo
做的一个扩展项目,如加了服务可
Restful
调用,更新了开源组件等。
注册中心
13. Dubbo
有哪些注册中心?
Multicast
注册中心:
Multicast
注册中心不需要任何中心节点,只要广播地址,就能进行服务注册
和发现
,
基于网络中组播传输实现。
Zookeeper
注册中心:基于分布式协调系统
Zookeeper
实现,采用
Zookeeper
的
watch
机制实
现数据变更。
Redis
注册中心:基于
Redis
实现,采用
key/map
存储,
key
存储服务名和类型,
map
中
key
存
储服务
url
,
value
服务过期时间。基于
Redis
的发布
/
订阅模式通知数据变更。
Simple
注册中心。
推荐使用
Zookeeper
作为注册中心
14. Dubbo
的注册中心集群挂掉,发布者和订阅者之间还能通信
么?
可以通讯。启动
Dubbo
时,消费者会从
Zookeeper
拉取注册的生产者的地址接口等数据,缓存
在本地。每次调用时,按照本地存储的地址进行调用。
集群
15. Dubbo
集群提供了哪些负载均衡策略?
Random LoadBalance:
随机选取提供者策略,有利于动态调整提供者权重。截面碰撞率高,调用
次数越多,分布越均匀。
RoundRobin LoadBalance:
轮循选取提供者策略,平均分布,但是存在请求累积的问题。
LeastActive LoadBalance:
最少活跃调用策略,解决慢提供者接收更少的请求。
ConstantHash LoadBalance:
一致性
Hash
策略,使相同参数请求总是发到同一提供者,一台机
器宕机,可以基于虚拟节点,分摊至其他提供者,避免引起提供者的剧烈变动。
默认为
Random
随机调用。
16. Dubbo
的集群容错方案有哪些?
Failover Cluster
:失败自动切换,当出现失败,重试其它服务器。通常用于读操作,但重试会带
来更长延迟。
Failfast Cluster
:快速失败,只发起一次调用,失败立即报错。通常用于非幂等性的写操作,比如
新增记录。
Failsafe Cluster
:失败安全,出现异常时,直接忽略。通常用于写入审计日志等操作。
Failback Cluster
:失败自动恢复,后台记录失败请求,定时重发。通常用于消息通知操作。
Forking Cluster
:并行调用多个服务器,只要一个成功即返回。通常用于实时性要求较高的读操
作,但需要浪费更多服务资源。可通过
forks=”2″
来设置最大并行数。
Broadcast Cluster
:广播调用所有提供者,逐个调用,任意一台报错则报错 。通常用于通知所有
提供者更新缓存或日志等本地资源信息。
默认的容错方案是
Failover Cluster
。
配置
17. Dubbo
配置文件是如何加载到
Spring
中的?
标签
用途
解释
dubbo:ser
vice/
服务配
置
用于暴露一个服务,定义服务的元信息,一个服务可以用多个协议暴
露,一个服务也可以注册到多个注册中心
dubbo:ref
erence/
引用配
置
用于创建一个远程服务代理,一个引用可以指向多个注册中心
dubbo:pro
tocol/
协议配
置
用于配置提供服务的协议信息,协议由提供方指定,消费方被动接受
dubbo:ap
plication/
应用配
置
用于配置当前应用信息,不管该应用是提供者还是消费者
dubbo:mo
dule/
模块配
置
用于配置当前模块信息,可选
dubbo:reg
istry/
注册中
心配置
用于配置连接注册中心相关信息
dubbo:mo
nitor/
监控中
心配置
用于配置连接监控中心相关信息,可选
dubbo:pro
vider/
提供方
配置
当
ProtocolConfifig
和
ServiceConfifig
某属性没有配置时,采用此缺省
值,可选
dubbo:co
nsumer/
消费方
配置
当
ReferenceConfifig
某属性没有配置时,采用此缺省值,可选
dubbo:me
thod/
方法配
置
用于
ServiceConfifig
和
ReferenceConfifig
指定方法级的配置信息
dubbo:arg
ument
参数配
置
用于指定方法参数配置
Spring
容器在启动的时候,会读取到
Spring
默认的一些
schema
以及
Dubbo
自定义的
schema
,每个
schema
都会对应一个自己的
NamespaceHandler
,
NamespaceHandler
里面通
过
BeanDefifinitionParser
来解析配置信息并转化为需要加载的
bean
对象!
18.
说说核心的配置有哪些?
如果是
SpringBoot
项目就只需要注解,或者开
Application
配置文件!!!
19. Dubbo
超时设置有哪些方式?
Dubbo
超时设置有两种方式:
服务提供者端设置超时时间,在
Dubbo
的用户文档中,推荐如果能在服务端多配置就尽量多配
置,因为服务提供者比消费者更清楚自己提供的服务特性。
服务消费者端设置超时时间,如果在消费者端设置了超时时间,以消费者端为主,即优先级更高。
因为服务调用方设置超时时间控制性更灵活。如果消费方超时,服务端线程不会定制,会产生警
告。
20.
服务调用超时会怎么样?
dubbo
在调用服务不成功时,默认是会重试两次。
通信协议
21. Dubbo
使用的是什么通信框架
?
默认使用
Netty
作为通讯框架。
22. Dubbo
支持哪些协议,它们的优缺点有哪些?
Dubbo
: 单一长连接和
NIO
异步通讯,适合大并发小数据量的服务调用,以及消费者远大于提供
者。传输协议
TCP
,异步
Hessian
序列化。
Dubbo
推荐使用
dubbo
协议。
RMI
: 采用
JDK
标准的
RMI
协议实现,传输参数和返回参数对象需要实现
Serializable
接口,使
用
Java
标准序列化机制,使用阻塞式短连接,传输数据包大小混合,消费者和提供者个数差不
多,可传文件,传输协议
TCP
。 多个短连接
TCP
协议传输,同步传输,适用常规的远程服务调用
和
RMI
互操作。在依赖低版本的
Common-Collections
包,
Java
序列化存在安全漏洞。
WebService
:基于
WebService
的远程调用协议,集成
CXF
实现,提供和原生
WebService
的互
操作。多个短连接,基于
HTTP
传输,同步传输,适用系统集成和跨语言调用。
HTTP
: 基于
Http
表单提交的远程调用协议,使用
Spring
的
HttpInvoke
实现。多个短连接,传
输协议
HTTP
,传入参数大小混合,提供者个数多于消费者,需要给应用程序和浏览器
JS
调用。
Hessian
:集成
Hessian
服务,基于
HTTP
通讯,采用
Servlet
暴露服务,
Dubbo
内嵌
Jetty
作为
服务器时默认实现,提供与
Hession
服务互操作。多个短连接,同步
HTTP
传输,
Hessian
序列
化,传入参数较大,提供者大于消费者,提供者压力较大,可传文件。
Memcache
:基于
Memcache
实现的
RPC
协议。
Redis
:基于
Redis
实现的
RPC
协议。
设计模式
23. Dubbo
用到哪些设计模式?
Dubbo
框架在初始化和通信过程中使用了多种设计模式,可灵活控制类加载、权限控制等功能。
工厂模式
Provider
在
export
服务时,会调用
ServiceConfifig
的
export
方法。
ServiceConfifig
中有个字段:
工厂模式
Provider
在
export
服务时,会调用
ServiceConfifig
的
export
方法。
ServiceConfifig
中有个字段:
private static final Protocol protocol =
ExtensionLoader.getExtensionLoader(Protocol.class).getAdaptiveExtensi
on();
Dubbo
里有很多这种代码。这也是一种工厂模式,只是实现类的获取采用了
JDKSPI
的机制。这么实现
的优点是可扩展性强,想要扩展实现,只需要在
classpath
下增加个文件就可以了,代码零侵入。另
外,像上面的
Adaptive
实现,可以做到调用时动态决定调用哪个实现,但是由于这种实现采用了动态
代理,会造成代码调试比较麻烦,需要分析出实际调用的实现类。
装饰器模式
Dubbo
在启动和调用阶段都大量使用了装饰器模式。以
Provider
提供的调用链为例,具体的调用
链代码是在
ProtocolFilterWrapper
的
buildInvokerChain
完成的,具体是将注解中含有
group=provider
的
Filter
实现,按照
order
排序,最后的调用顺序是:
更确切地说,这里是装饰器和责任链模式的混合使用。例如,
EchoFilter
的作用是判断是否是回声测试
请求,是的话直接返回内容,这是一种责任链的体现。而像
ClassLoaderFilter
则只是在主功能上添加了
功能,更改当前线程的
ClassLoader
,这是典型的装饰器模式。
观察者模式
Dubbo
的
Provider
启动时,需要与注册中心交互,先注册自己的服务,再订阅自己的服务,订阅
时,采用了观察者模式,开启一个
listener
。注册中心会每
5
秒定时检查是否有服务更新,如果有
更新,向该服务的提供者发送一个
notify
消息,
provider
接受到
notify
消息后,运行
NotifyListener
的
notify
方法,执行监听器方法。
动态代理模式
Dubbo
扩展
JDK SPI
的类
ExtensionLoader
的
Adaptive
实现是典型的动态代理实现。
Dubbo
需
要灵活地控制实现类,即在调用阶段动态地根据参数决定调用哪个实现类,所以采用先生成代理类
的方法,能够做到灵活的调用。生成代理类的代码是
ExtensionLoader
的
createAdaptiveExtensionClassCode
方法。代理类主要逻辑是,获取
URL
参数中指定参数的值作
为获取实现类的
key
。
运维管理
24.
服务上线怎么兼容旧版本?
可以用版本号(
version
)过渡,多个不同版本的服务注册到注册中心,版本号不同的服务相互间
不引用。这个和服务分组的概念有一点类似。
25. Dubbo telnet
命令能做什么?
dubbo
服务发布之后,我们可以利用
telnet
命令进行调试、管理。
Dubbo2.0.5
以上版本服务提
供端口支持
telnet
命令
private static final Protocol protocol =
ExtensionLoader.getExtensionLoader(Protocol.class).getAdaptiveExtensi
on();
EchoFilter -> ClassLoaderFilter -> GenericFilter -> ContextFilter ->
ExecuteLimitFilter -> TraceFilter -> TimeoutFilter -> MonitorFilter ->
ExceptionFilter
26. Dubbo
支持服务降级吗?
以通过
dubbo:reference
中设置
mock=“return null”
。
mock
的值也可以修改为
true
,然后再跟
接口同一个路径下实现一个
Mock
类,命名规则是
“
接口名称
+Mock”
后缀。然后在
Mock
类里实
现自己的降级逻辑
27. Dubbo
如何优雅停机?
Dubbo
是通过
JDK
的
ShutdownHook
来完成优雅停机的,所以如果使用
kill -9 PID
等强制关闭指
令,是不会执行优雅停机的,只有通过
kill PID
时,才会执行。
SPI
28. Dubbo SPI
和
Java SPI
区别?
JDK SPI
:
JDK
标准的
SPI
会一次性加载所有的扩展实现,如果有的扩展很耗时,但也没用上,很浪费资源。
所以只希望加载某个的实现,就不现实了
DUBBO SPI
:
1
、对
Dubbo
进行扩展,不需要改动
Dubbo
的源码
2
、延迟加载,可以一次只加载自己想要加载的扩展实现。
3
、增加了对扩展点
IOC
和
AOP
的支持,一个扩展点可以直接
setter
注入其它扩展点。
4
、
Dubbo
的扩展机制能很好的支持第三方
IoC
容器,默认支持
Spring Bean
。
其他
29. Dubbo
支持分布式事务吗?
目前暂时不支持,可与通过
tcc-transaction
框架实现
介绍:
tcc-transaction
是开源的
TCC
补偿性分布式事务框架
TCC-Transaction
通过
Dubbo
隐式传参的功能,避免自己对业务代码的入侵。
30. Dubbo
可以对结果进行缓存吗?
为了提高数据访问的速度。
Dubbo
提供了声明式缓存,以减少用户加缓存的工作量
<dubbo:reference cache=“true” />
其实比普通的配置文件就多了一个标签
cache=“true”
31. Dubbo
必须依赖的包有哪些?
Dubbo
必须依赖
JDK
,其他为可选。
32. Dubbo
支持哪些序列化方式?
默认使用
Hessian
序列化,还有
Duddo
、
FastJson
、
Java
自带序列化。
33. Dubbo
在安全方面有哪些措施?
Dubbo
通过
Token
令牌防止用户绕过注册中心直连,然后在注册中心上管理授权。
Dubbo
还提供服务黑白名单,来控制服务所允许的调用方。
34.
服务调用是阻塞的吗?
默认是阻塞的,可以异步调用,没有返回值的可以这么做。
Dubbo
是基于
NIO
的非阻塞实现并行
调用,客户端不需要启动多线程即可完成并行调用多个远程服务,相对多线程开销较小,异步调用
会返回一个
Future
对象。
35.
服务提供者能实现失效踢出是什么原理?
服务失效踢出基于
zookeeper
的临时节点原理。
36.
同一个服务多个注册的情况下可以直连某一个服务吗?
可以点对点直连,修改配置即可,也可以通过
telnet
直接某个服务。
37. Dubbo
服务降级,失败重试怎么做?
可以通过
dubbo:reference
中设置
mock=“return null”
。
mock
的值也可以修改为
true
,然后再
跟接口同一个路径下实现一个
Mock
类,命名规则是
“
接口名称
+Mock”
后缀。然后在
Mock
类里
实现自己的降级逻辑
38.Dubbo
使用过程中都遇到了些什么问题?
在注册中心找不到对应的服务
,
检查
service
实现类是否添加了
@service
注解无法连接到注册中心
,
检查配置文件中的对应的测试
ip
是否正确
RPC
39.
为什么要有
RPC
http
接口是在接口不多、系统与系统交互较少的情况下,解决信息孤岛初期常使用的一种通信手
段;优点就是简单、直接、开发方便。利用现成的
http
协议进行传输。但是如果是一个大型的网
站,内部子系统较多、接口非常多的情况下,
RPC
框架的好处就显示出来了,首先就是长链接,不
必每次通信都要像
http
一样去
3
次握手什么的,减少了网络开销;其次就是
RPC
框架一般都有注册
中心,有丰富的监控管理;发布、下线接口、动态扩展等,对调用方来说是无感知、统一化的操
作。第三个来说就是安全性。最后就是最近流行的服务化架构、服务化治理,
RPC
框架是一个强力
的支撑。
socket
只是一个简单的网络通信方式,只是创建通信双方的通信通道,而要实现
rpc
的功能,还需
要对其进行封装,以实现更多的功能。
RPC
一般配合
netty
框架、
spring
自定义注解来编写轻量级框架,其实
netty
内部是封装了
socket
的,较新的
jdk
的
IO
一般是
NIO
,即非阻塞
IO
,在高并发网站中,
RPC
的优势会很明显
40.
什么是
RPC
RPC
(
Remote Procedure Call Protocol
)远程过程调用协议,它是一种通过网络从远程计算机程
序上请求服务,而不需要了解底层网络技术的协议。简言之,
RPC
使得程序能够像访问本地系统资
源一样,去访问远端系统资源。比较关键的一些方面包括:通讯协议、序列化、资源(接口)描
述、服务框架、性能、语言支持等。
简单的说,
RPC
就是从一台机器
(
客户端
)
上通过参数传递的方式调用另一台机器
(
服务器
)
上的一个
函数或方法
(
可以统称为服务
)
并得到返回的结果。
41. PRC
架构组件
一个基本的
RPC
架构里面应该至少包含以下
4
个组件:
1
、客户端(
Client
)
:
服务调用方(服务消费者)
2
、客户端存根(
Client Stub
)
:
存放服务端地址信息,将客户端的请求参数数据信息打包成网络消
息,再通过网络传输发送给服务端
3
、服务端存根(
Server Stub
)
:
接收客户端发送过来的请求消息并进行解包,然后再调用本地服
务进行处理
4
、服务端(
Server
)
:
服务的真正提供者
具体调用过程:
1
、服务消费者(
client
客户端)通过调用本地服务的方式调用需要消费的服务;
2
、客户端存根(
client stub
)接收到调用请求后负责将方法、入参等信息序列化(组装)成能够
进行网络传输的消息体;
3
、客户端存根(
client stub
)找到远程的服务地址,并且将消息通过网络发送给服务端;
4
、服务端存根(
server stub
)收到消息后进行解码(反序列化操作);
5
、服务端存根(
server stub
)根据解码结果调用本地的服务进行相关处理;
6
、本地服务执行具体业务逻辑并将处理结果返回给服务端存根(
server stub
);
7
、服务端存根(
server stub
)将返回结果重新打包成消息(序列化)并通过网络发送至消费方;
8
、客户端存根(
client stub
)接收到消息,并进行解码(反序列化);
9
、服务消费方得到最终结果;
而
RPC
框架的实现目标则是将上面的第
2
-
10
步完好地封装起来,也就是把调用、编码
/
解码的过程给封装起来,让
用户感觉上像调用本地服务一样的调用远程服务。
42. RPC
和
SOA
、
SOAP
、
REST
的区别
1
、
REST
可以看着是
HTTP
协议的一种直接应用,默认基于
JSON
作为传输格式
,
使用简单
,
学习成本低效率高
,
但是安全性较低。
2
、
SOAP
SOAP
是一种数据交换协议规范
,
是一种轻量的、简单的、基于
XML
的协议的规范。而
SOAP
可以看
着是一个重量级的协议,基于
XML
、
SOAP
在安全方面是通过使用
XML-Security
和
XML-Signature
两个规范组成了
WS-Security
来实现安全控制的
,
当前已经得到了各个厂商的支持 。
它有什么优点?简单总结为:易用、灵活、跨语言、跨平台。
3
、
SOA
面向服务架构,它可以根据需求通过网络对松散耦合的粗粒度应用组件进行分布式部署、组合和使
用。服务层是
SOA
的基础,可以直接被应用调用,从而有效控制系统中与软件代理交互的人为依赖
性。
SOA
是一种粗粒度、松耦合服务架构,服务之间通过简单、精确定义接口进行通讯,不涉及底层编
程接口和通讯模型。
SOA
可以看作是
B/S
模型、
XML
(标准通用标记语言的子集)
/Web Service
技
术之后的自然延伸。
4
、
REST
和
SOAP
、
RPC
有何区别呢
?
没什么太大区别,他们的本质都是提供可支持分布式的基础服务,最大的区别在于他们各自的的特
点所带来的不同应用场景 。
43. RPC
框架需要解决的问题?
1
、如何确定客户端和服务端之间的通信协议?
2
、如何更高效地进行网络通信?
3
、服务端提供的服务如何暴露给客户端?
4
、客户端如何发现这些暴露的服务?
5
、如何更高效地对请求对象和响应结果进行序列化和反序列化操作?
44. RPC
的实现基础?
1
、需要有非常高效的网络通信,比如一般选择
Netty
作为网络通信框架;
2
、需要有比较高效的序列化框架,比如谷歌的
Protobuf
序列化框架;
3
、可靠的寻址方式(主要是提供服务的发现),比如可以使用
Zookeeper
来注册服务等等;
4
、如果是带会话(状态)的
RPC
调用,还需要有会话和状态保持的功能;
45. RPC
使用了哪些关键技术?
1
、动态代理
生成
Client Stub
(客户端存根)和
Server Stub
(服务端存根)的时候需要用到
Java
动态代理技术,可
以使用
JDK
提供的原生的动态代理机制,也可以使用开源的:
CGLib
代理,
Javassist
字节码生成技术。
2
、序列化和反序列化
在网络中,所有的数据都将会被转化为字节进行传送,所以为了能够使参数对象在网络中进行传输,需
要对这些参数进行序列化和反序列化操作。
序列化:把对象转换为字节序列的过程称为对象的序列化,也就是编码的过程。反序列化:把字节
序列恢复为对象的过程称为对象的反序列化,也就是解码的过程。 目前比较高效的开源序列化框
架:如
Kryo
、
FastJson
和
Protobuf
等。
反序列化:把字节序列恢复为对象的过程称为对象的反序列化,也就是解码的过程。 目前比较高
效的开源序列化框架:如
Kryo
、
FastJson
和
Protobuf
等。
3
、
NIO
通信
出于并发性能的考虑,传统的阻塞式
IO
显然不太合适,因此我们需要异步的
IO
,即
NIO
。
Java
提供
了
NIO
的解决方案,
Java 7
也提供了更优秀的
NIO.2
支持。可以选择
Netty
或者
MINA
来解决
NIO
数据
传输的问题。
4
、服务注册中心
可选:
Redis
、
Zookeeper
、
Consul
、
Etcd
。一般使用
ZooKeeper
提供服务注册与发现功能,解决单
点故障以及分布式部署的问题
(
注册中心
)
。
46.
主流
RPC
框架有哪些
1
、
RMI
利用
java.rmi
包实现,基于
Java
远程方法协议
(Java Remote Method Protocol)
和
java
的原生序列
化。
2
、
Hessian
是一个轻量级的
remoting onhttp
工具,使用简单的方法提供了
RMI
的功能。 基于
HTTP
协议,采
用二进制编解码。
3
、
protobuf-rpc-pro
是一个
Java
类库,提供了基于
Google
的
Protocol Buffffers
协议的远程方法调用的框架。基于
Netty
底层的
NIO
技术。支持
TCP
重用
/ keep-alive
、
SSL
加密、
RPC
调用取消操作、嵌入式日志
等功能。
4
、
Thrift
是一种可伸缩的跨语言服务的软件框架。它拥有功能强大的代码生成引擎,无缝地支持
C + +
,
C#
,
Java
,
Python
和
PHP
和
Ruby
。
thrift
允许你定义一个描述文件,描述数据类型和服务接口。
依据该文件,编译器方便地生成
RPC
客户端和服务器通信代码。
最初由
facebook
开发用做系统内个语言之间的
RPC
通信,
2007
年由
facebook
贡献到
apache
基金 ,现
在是
apache
下的
opensource
之一 。支持多种语言之间的
RPC
方式的通信:
php
语言
client
可以构造一
个对象,调用相应的服务方法来调用
java
语言的服务,跨越语言的
C/S RPC
调用。底层通讯基于
SOCKET
。
5
、
Avro
出自
Hadoop
之父
Doug Cutting,
在
Thrift
已经相当流行的情况下推出
Avro
的目标不仅是提供一套类
似
Thrift
的通讯中间件
,
更是要建立一个新的,标准性的云计算的数据交换和存储的
Protocol
。支持
HTTP
,
TCP
两种协议。
6
、
Dubbo
Dubbo
是 阿里巴巴公司开源的一个高性能优秀的服务框架,使得应用可通过高性能的
RPC
实现服
务的输出和输入功能,可以和
Spring
框架无缝集成。
47. RPC
的实现原理架构图
也就是说两台服务器
A
,
B
,一个应用部署在
A
服务器上,想要调用
B
服务器上应用提供的函数
/
方法,由
于不在一个内存空间,不能直接调用,需要通过网络来表达调用的语义和传达调用的数据。
比如说,
A
服务器想调用
B
服务器上的一个方法:
1
、建立通信
首先要解决通讯的问题:即
A
机器想要调用
B
机器,首先得建立起通信连接。
主要是通过在客户端和服务器之间建立
TCP
连接,远程过程调用的所有交换的数据都在这个连接里传
输。连接可以是按需连接,调用结束后就断掉,也可以是长连接,多个远程过程调用共享同一个连接。
通常这个连接可以是按需连接(需要调用的时候就先建立连接,调用结束后就立马断掉),也可以是长
连接(客户端和服务器建立起连接之后保持长期持有,不管此时有无数据包的发送,可以配合心跳检测
机制定期检测建立的连接是否存活有效),多个远程过程调用共享同一个连接。
2
、服务寻址
要解决寻址的问题,也就是说,
A
服务器上的应用怎么告诉底层的
RPC
框架,如何连接到
B
服务器(如
主机或
IP
地址)以及特定的端口,方法的名称名称是什么。
通常情况下我们需要提供
B
机器(主机名或
IP
地址)以及特定的端口,然后指定调用的方法或者函数的
名称以及入参出参等信息,这样才能完成服务的一个调用。
可靠的寻址方式(主要是提供服务的发现)是
RPC
的实现基石,比如可以采用
Redis
或者
Zookeeper
来
注册服务等等。
2.1
、从服务提供者的角度看:
当服务提供者启动的时候,需要将自己提供的服务注册到指定的注册中心,以便服务消费者能够通过服
务注册中心进行查找;
当服务提供者由于各种原因致使提供的服务停止时,需要向注册中心注销停止的服务;
服务的提供者需要定期向服务注册中心发送心跳检测,服务注册中心如果一段时间未收到来自服务提供
者的心跳后,认为该服务提供者已经停止服务,则将该服务从注册中心上去掉。
2.2
、从调用者的角度看:
服务的调用者启动的时候根据自己订阅的服务向服务注册中心查找服务提供者的地址等信息;
当服务调用者消费的服务上线或者下线的时候,注册中心会告知该服务的调用者;
服务调用者下线的时候,则取消订阅。
3
、网络传输
3.1
、序列化
当
A
机器上的应用发起一个
RPC
调用时,调用方法和其入参等信息需要通过底层的网络协议如
TCP
传输
到
B
机器,由于网络协议是基于二进制的,所有我们传输的参数数据都需要先进行序列化(
Serialize
)
或者编组(
marshal
)成二进制的形式才能在网络中进行传输。然后通过寻址操作和网络传输将序列化
或者编组之后的二进制数据发送给
B
机器。
3.2
、反序列化
当
B
机器接收到
A
机器的应用发来的请求之后,又需要对接收到的参数等信息进行反序列化操作(序列
化的逆操作),即将二进制信息恢复为内存中的表达方式,然后再找到对应的方法(寻址的一部分)进
行本地调用(一般是通过生成代理
Proxy
去调用
,
通常会有
JDK
动态代理、
CGLIB
动态代理、
Javassist
生
成字节码技术等),之后得到调用的返回值。
4
、服务调用
B
机器进行本地调用(通过代理
Proxy
和反射调用)之后得到了返回值,此时还需要再把返回值发
送回
A
机器,同样也需要经过序列化操作,然后再经过网络传输将二进制数据发送回
A
机器,而当
A
机器接收到这些返回值之后,则再次进行反序列化操作,恢复为内存中的表达方式,最后再交给
A
机器上的应用进行相关处理(一般是业务逻辑处理操作)。
通常,经过以上四个步骤之后,一次完整的
RPC
调用算是完成了,另外可能因为网络抖动等原因需要重试等。