Spring Boot学习之Dubbo+Zookeeper初识

已于 2023-01-30 14:26:41 修改
阅读量1k 收藏 2
点赞数
分类专栏： # springboot 文章标签： dubbo java-zookeeper zookeeper
于 2023-01-29 21:42:19 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yang2330648064/article/details/128790320
版权

文章目录

一 分布式理论基础知识

  • 分布式系统是若干独立计算机的集合，这些计算机对于用户来说就像单个相关系统
  • 分布式系统是由一组通过网络进行通信、为了完成共同的任务而协调工作的计算机节点组成的系统。
  • 分布式系统的出现是为了用廉价的、普通的机器完成单个计算机无法完成的计算、存储任务。
    • 其目的是利用更多的机器，处理更多的数据。
  • 分布式系统（distributed system）是建立在网络之上的软件系统。
    • 首先需要明确的是，只有当单个节点的处理能力无法满足日益增长的计算、存储任务的时候，且硬件的提升（加内存、加磁盘、使用更好的CPU）高昂到得不偿失的时候，应用程序也不能进一步优化的时候，我们才需要考虑分布式系统。
    • 因为，分布式系统要解决的问题本身就是和单机系统一样的，而由于分布式系统多节点、通过网络通信的拓扑结构，会引入很多单机系统没有的问题，为了解决这些问题又会引入更多的机制、协议，带来更多的问题。
  • 分布式服务架构的演进
    在这里插入图片描述

1.1 单一应用架构

在这里插入图片描述

  • 关键：用于简化增删改查工作量的数据访问框架(ORM)
  • 优点
    • 一个应用将所有应用功能都部署在一起，减少成本！
  • 缺点
    • 不利于维护升级
    • 性能拓展不易
    • 协同开发困难

1.2 垂直应用架构

在这里插入图片描述

  • 关键用于加速前端页面开发的Web框架(MVC)
  • 优点
    • 通过切分业务来实现各个模块独立部署，降低了维护和部署难度，方便团队管理
    • 方便性能扩展，针对性强。
  • 缺点：
    • 公用模块无法重复利用，开发性的浪费

1.3 分布式服务架构

在这里插入图片描述

1.4 流动计算架构

在这里插入图片描述

  • 关键：提高机器利用率的资源调度和治理中心(SOA)【Service Oriented Architecture】
  • 优点
    • 提高集群利用率
  • 缺点
    • 系统与服务的界限模糊的,不利于设计.
    • ESB是作为系统与系统之间桥梁,没有统一标准,种类很多,不利于维护.

1.5 PRC[Remote Procedure Call]

  • RPC【Remote Procedure Call】是指远程过程调用，是一种进程间通信方式，他是一种技术的思想，而不是规范。
  • 它允许程序调用另一个地址空间（通常是共享网络的另一台机器上）的过程或函数，而不用程序员显式编码这个远程调用的细节。【即程序员无论是调用本地的还是远程的函数，本质上编写的调用代码基本相同】
  • RPC基本原理
    在这里插入图片描述
  • 步骤解析
    在这里插入图片描述
  • RPC两个核心模块
    • 通讯
    • 序列化：数据传输需要转换

二 Dubbo

2.1 Dubbo简介

  • Dubbo官网
  • Apache Dubbo 是一款高性能、轻量级的开源Java RPC框架
  • 它提供了三大核心能力
    • 面向接口的远程方法调用
    • 智能容错和负载均衡
    • 以及服务自动注册和发现。
  • Dubbo 基本工作流程
    在这里插入图片描述

在这里插入图片描述

  • 服务提供者(Provider)：暴露服务的服务提供方，服务提供者在启动时，向注册中心注册自己提供的服务。
  • 服务消费者(Consumer): 调用远程服务的服务消费方，服务消费者在启动时，向注册中心订阅自己所需的服务，服务消费者，从提供者地址列表中，基于软负载均衡算法，选一台提供者进行调用，如果调用失败，再选另一台调用。
  • 注册中心(Registry)：注册中心返回服务提供者地址列表给消费者，如果有变更，注册中心将基于长连接推送变更数据给消费者
  • 监控中心(Monitor)：服务消费者和提供者，在内存中累计调用次数和调用时间，定时每分钟发送一次统计数据到监控中心
  • 调用关系说明
    • 服务容器负责启动，加载，运行服务提供者。
    • 服务提供者在启动时，向注册中心注册自己提供的服务。
    • 服务消费者在启动时，向注册中心订阅自己所需的服务。
    • 注册中心返回服务提供者地址列表给消费者，如果有变更，注册中心将基于长连接推送变更数据给消费者。
    • 服务消费者，从提供者地址列表中，基于软负载均衡算法，选一台提供者进行调用，如果调用失败，再选另一台调用。
    • 服务消费者和提供者，在内存中累计调用次数和调用时间，定时每分钟发送一次统计数据到监控中心

三 Dubbo环境搭建

3.1 Zookeeper简介

  • ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。
  • ZooKeeper的目标就是封装好复杂易出错的关键服务，将简单易用的接口和性能高效、功能稳定的系统提供给用户。
  • ZooKeeper包含一个简单的原语集，提供Java和C的接口。

3.2 Zookeeper下载与安装

  • 使用这个下载地址的版本，可以避免错误三的情况！
  • 在bin目录前，输入cmd以管理员运行
    在这里插入图片描述
  • 输入以下命令zkService .cmd,会出现以下问题
    在这里插入图片描述
  • 双击运行zkService.cmd闪退

3.3 解决问题

问题一：
	错误：找不到或无法加载主类 org.apache.zookeeper.server.quorum.QuorumPeerMain
问题二：
ERROR [main:o.a.z.s.q.QuorumPeerMain@99] 
- Invalid config, exiting abnormally org.apache.zookeeper.server.quorum.QuorumPeerConfig$ConfigException: 
Error processing C:\environment\apache-zookeeper-3.8.0-bin\apache-zookeeper-3.8.0-bin\bin\..\conf\zoo.cfg
问题三：
ZooKeeper audit is disabled
  • 编辑zkService.cmd添加pause命令，查看详细的错误信息 在这里插入图片描述
  • 双击运行zkService.cmd文件运行，出现错误信息
    C:\environment\apache-zookeeper-3.7.1\apache-zookeeper-3.7.1\bin>call 
"C:\Program Files\Java\jdk1.8.0_131"\bin\java 
"-Dzookeeper.log.dir=C:\environment\apache-zookeeper-3.7.1\apache-zookeeper-3.7.1\bin\..\logs" 
"-Dzookeeper.root.logger=INFO,CONSOLE" 
"-Dzookeeper.log.file=zookeeper-HP-server-DESKTOP-OGQJ662.log" 
"-XX:+HeapDumpOnOutOfMemoryError" 
"-XX:OnOutOfMemoryError=cmd /c taskkill /pid %%p /t /f" -cp 
"C:\environment\apache-zookeeper-3.7.1\apache-zookeeper-3.7.1\bin\..\build\classes;
C:\environment\apache-zookeeper-3.7.1\apache-zookeeper-3.7.1\bin\..\build\lib\*;
C:\environment\apache-zookeeper-3.7.1\apache-zookeeper-3.7.1\bin\..\*;
C:\environment\apache-zookeeper-3.7.1\apache-zookeeper-3.7.1\bin\..\lib\*;
C:\environment\apache-zookeeper-3.7.1\apache-zookeeper-3.7.1\bin\..\conf" 
org.apache.zookeeper.server.quorum.QuorumPeerMain 
"C:\environment\apache-zookeeper-3.7.1\apache-zookeeper-3.7.1\bin\..\conf\zoo.cfg"
错误: 找不到或无法加载主类 org.apache.zookeeper.server.quorum.QuorumPeerMain

3.3.1 错误一的分析和解决

  • 问题分析
    • 下载的是未编译的 jar 包
    • 注：zookeeper 3.5 版本以后，命名就发生了改变，如 apache-zookeeper-3.8.0.tar.gz 这般命名的，都是未编译的，而 apache-zookeeper-3.8.0-bin.tar.gz 这般命名的，才是已编译的包。
  • 解决方法
    • 重新下载 apache-zookeeper-3.8.0-bin.tar.gz 包，然后解压使用
  • 下载完运行zkService.cmd，出现以下错误
2023-01-29 17:02:21,637 [myid:] - INFO  [main:o.a.z.s.q.QuorumPeerConfig@177] 
- Reading configuration from: C:\environment\apache-zookeeper-3.8.0-bin\apache-zookeeper-3.8.0-bin\bin\..\conf\zoo.cfg
2023-01-29 17:02:21,640 [myid:] - ERROR [main:o.a.z.s.q.QuorumPeerMain@99] 
- Invalid config, exiting abnormally org.apache.zookeeper.server.quorum.QuorumPeerConfig$ConfigException: 
Error processing C:\environment\apache-zookeeper-3.8.0-bin\apache-zookeeper-3.8.0-bin\bin\..\conf\zoo.cfg

3.3.2 错误二的分析和解决

  • 问题分析
    • 由上面的错误信息可以看到，程序没有找到conf文件夹下的zoo.cfg文件
  • 解决方法
    • 将zoo_saple.cfg文件复制一份，重命名为zoo.cfg
    • 在zoo.cfg可以看到Zookeeper默认的端口号为：2181
    # The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial 
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between 
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just 
# example sakes.
dataDir=/tmp/zookeeper
# the port at which the clients will connect
clientPort=2181
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1

## Metrics Providers
#
# https://prometheus.io Metrics Exporter
#metricsProvider.className=org.apache.zookeeper.metrics.prometheus.PrometheusMetricsProvider
#metricsProvider.httpPort=7000
#metricsProvider.exportJvmInfo=true
  • 注意
    - dataDir=./ 临时数据存储的目录（可写相对路径）
    - clientPort=2181 zookeeper的端口号

3.3.3 错误三的分析和解决

  • 然后，快乐地运行zkService.cmd又又又遇到了错误！
2023-01-29 17:11:11,775 [myid:] - INFO  [main:o.a.z.a.ZKAuditProvider@42] - ZooKeeper audit is disabled.
  • 问题分析
    • zookeeper新版本启动的过程中，zookeeper新增的审核日志是默认关闭，所以控制台输出ZooKeeper audit is disabled。
    • 标准的修改方式应该是在zookeeper的配置文件zoo.cfg新增一行audit.enable=true即可
  • 解决方法
    • 修改zkServer.cmd 添加"-Dzookeeper.audit.enable=true"
      在这里插入图片描述

3.4 zookeeper运行测试

  • 在解决完上面的三个问题之后，记得将zkService.cmd文件中的pause命令删除
  • 双击运行zkService.cmd服务端，在最后看到下面的信息，表明运行成功！
    [myid:] - INFO  [main:o.a.z.a.Slf4jAuditLogger@35] - user=HP    operation=serverStart       result=success
  • 双击运行zkCli.cmd客户端
  • 连接成功的效果
    • 服务端效果
    [myid:] - INFO  [SyncThread:0:o.a.z.s.p.FileTxnLog@285] - Creating new log file: log.1
    • 客户端效果
    WatchedEvent state:SyncConnected type:None path:null
[zk: localhost:2181(CONNECTED) 0]
  • ls /：列出zookeeper根下保存的所有节点
    在这里插入图片描述
  • create –e /yang 123：创建一个/yang节点，值为666
    在这里插入图片描述
  • get /yang：获取/yang节点的值
    在这里插入图片描述

四 安装dubbo-admin【window环境】

4.1 dubbo-admin（有问题没解决）【可跳过】

  • dubbo-adming-github

  • 选择使用稳定版本master版本
    在这里插入图片描述

  • 遇到问题：按照提示操作即可

    • 同时注意将：压缩包的名字进行相应的修改
    • 如该错误将需要的文件node-v9.11.1-win-x64.zip下载下来，然后修改为node-9.11.1-win-x64.zip放到相应的目录下
    [INFO] Downloading https://nodejs.org/dist/v9.11.1/node-v9.11.1-win-x64.zip to 
C:\environment\apache-maven-3.6.3\maven-repo\com\github\eirslett\node\9.11.1\node-9.11.1-win-x64.zip

  • 然后重新运行命令mvn clean package -Dmaven.test.skip=true进行打包！
    在这里插入图片描述

  • 生成的jar包在dubbo-admin-master\dubbo-admin-distribution\target目录下

  • 执行jar包java -jar dubbo-admin-0.5.0.jar
    在这里插入图片描述

  • 未开启Zookeeper，所以会出现错误

java.lang.IllegalStateException: java.lang.IllegalStateException: zookeeper not connected
at org.apache.dubbo.config.deploy.DefaultApplicationDeployer.prepareEnvironment(DefaultApplicationDeployer.java:678)
at org.apache.dubbo.config.deploy.DefaultApplicationDeployer.startConfigCenter(DefaultApplicationDeployer.java:261)
at org.apache.dubbo.config.deploy.DefaultApplicationDeployer.initialize(DefaultApplicationDeployer.java:185)
at org.apache.dubbo.config.deploy.DefaultModuleDeployer.prepare(DefaultModuleDeployer.java:470)
at org.apache.dubbo.config.spring.context.DubboConfigApplicationListener.initDubboConfigBeans
(DubboConfigApplicationListener.java:71)
  • 经过连接Zookeeper，发现Dubbo-admin一直出现连接后8080端口占用，立即断开连接的问题
  • 所以最终降低了dubbo的版本，操作如下
  • 如果有大佬，能够解决此问题！希望能够不吝解惑！！

4.2 dubbo-admin-master-0.2.0【建议食用】

  1. 进入dubbo-adming-github选择使用master-0.2.0版本
    在这里插入图片描述
  2. 解压后，dubbo-admin\src\main\resources \application.properties 中可指定zookeeper地址
    server.port=7001
spring.velocity.cache=false
spring.velocity.charset=UTF-8
spring.velocity.layout-url=/templates/default.vm
spring.messages.fallback-to-system-locale=false
spring.messages.basename=i18n/message
spring.root.password=root
spring.guest.password=guest
dubbo.registry.address=zookeeper://127.0.0.1:2181
  1. 在dubbo-admin目录下，使用管理员身份运行命令mvn clean package -Dmaven.test.skip=true进行打包
    在这里插入图片描述
    • 在dubbo-admin-master-0.2.0\dubbo-admin\target目录下，可以看到生成的jar包

4.3 测试

  1. 首先运行Zookeeper【双击zhService.cmd】
  2. 然后，打开终端进入dubbo-admin-master-0.2.0\dubbo-admin\target目录下，执行命令java -jar dubbo-admin-0.0.1-SNAPSHOT.jar
  3. 最后，访问http://localhost:7001/
    在这里插入图片描述
缘友一世
关注
专栏目录
Springboot集成dubbo+zookeeper(Windows 详解)
@峰的博客
09-18 729
本文介绍这两天使用springboot搭建dubbo的过程和遇到的问题一、配置zookeeper注册中心1.下载zookeeper注册中心服务（我使用的是3.4.10） http://www.apache.org/dyn/closer.cgi/zookeeper/ 2.解压下载的压缩包到本地3.进入conf文件，将zoo_sample.cfg复制一份，并且改名为zoo.cfg4.进入bin目录，
Dubbo初识-入门
woyaochange的专栏
11-06 252
Apache Dubbo是一个分布式服务框架，于2019年5月，正式称为Apache的顶级项目。前身于2012年开源，但是2014年停止维护，所幸阿里巴巴2017年9月重新对Dubbo启动了维护并长期投入规划。 Apache Dubbo主要实现了多个系统之间的高性能、透明化调用，是一个RPC框架，不过相比普通RPC框架，它还提供了服务治理功能，如服务注册、监控、容错、路由等。 Apache Dubbo提供不仅限于如下功能： 面向接口代理的高性能RPC调用：服务以接口未力度，屏蔽远程调用底层细节； 智
SpringBoot之Dubbo和Zookeeper
爱学习的大雄的博客
03-16 4441
Dubbo和Zookeeper Window下安装zookeeper 注册中心 下载zookeeper，官网地址：https://zookeeper.apache.org/ 我选择下载的是apache-zookeeper-3.5.9-bin.tar.gz 步骤： 打开下载的文件（管理员模式打开），运行/bin/zkServer.cmd，初次运行时可能会报错，因为没有zoo.cfg 也有可能遇到闪退的问题！ 闪退的解决方案：右键编辑zkServer.cmd文件，在末尾添加pauser（
使用Spring Boot和Zookeeper实现服务协调
最新发布
聚娃科技开发者博客
07-07 827
Zookeeper是一个分布式协调服务，主要用于分布式应用中的命名服务、配置管理、分布式锁和组服务。本文详细介绍了如何使用Spring Boot和Zookeeper实现服务协调，包括项目初始化、配置Zookeeper、服务注册和发现的实现。Zookeeper是一个开源的分布式协调服务，提供了简洁的接口用于实现分布式系统中的协调工作。使用Zookeeper实现服务注册和发现，创建一个简单的服务并注册到Zookeeper。创建一个服务发现类，从Zookeeper中获取可用的服务实例。
Spring Boot整合Dubbo+ZooKeeper
null
04-10 923
Autowired**注解用法是类似的，只是@Autowired注解是自动装配本地的服务，@DubboReference是远程引用服务提供者的服务。要使用服务提供者提供的服务，需要先从注册中心中获取服务，获取服务使用**@DubboReference**注解。使用**@DubboService**后，可以被扫描到，在项目已启动就自动注册到注册中心。服务，服务启动成功后，可以在Dubbo-Admin中看到消费者和提供者的服务调用关系。启动服务，服务启动成功后，可以在Dubbo-Admin中看到注册的服务。
springboot+zookeeper+dubbo
morebetter4hl的博客
04-25 2733
springboot+zookeeper+dubbo
springboot+dubbo+zookeeper
拱白菜的猪的博客
10-21 1134
本文将实现使用springboot+dubbo+zookeeper搭建能够提供远程服务的架构 目录 一. 环境搭建 1. 搭建zookeeper服务 2. 下载dubbo-admin项目，监控服务 二. 创建项目 1. IDEA创建项目 2. 导入依赖 3. 修改配置文件，连接zookeeper 4. 调用服务 一. 环境搭建 1. 搭建zookeeper服务 1.1 进入zookeeper官网进行下载 https://zookeeper.apache.org/re...
SpringAll_wuyouzhuguli.tar.gz
10-20
循序渐进，学习Spring Boot、Spring Boot & Shiro、Spring Cloud、Spring Security & Spring Security OAuth2，博客Spring系列源码 ...Spring Boot整合Dubbo&Zookeeper; 监控Dubbo服务 Dubbo的高可用
dubbo-dubbo-3.2.6.zip
09-15
《Dubbo 3.2.6：分布式服务框架的深度解析》 Dubbo，作为阿里巴巴开源的一款高性能、轻量级的Java服务...无论你是初识Dubbo的新手，还是已经对其有一定了解的开发者，都可以在这个版本中找到新的学习点和提升空间。
微服务治理系列- Spring Cloud alibaba 篇 第一章初识 SpringCloud alibaba
csdn_welearn的博客
05-07 3792
概述 2018 年 10 月 31 日的凌晨，这个伟大的日子里，Spring Cloud Alibaba 正式入驻了 Spring Cloud 官方孵化器，并在 Maven 中央库发布了第一个版本。 Spring Cloud for Alibaba 0.2.0 released The Spring Cloud Alibaba project, consisting of Alibaba’...
Spring Boot中的分布式开发与微服务架构
## 初识Spring Boot ### 2.1 Spring Boot概述 Spring Boot是一个开源的Java框架，用于快速构建独立的、可部署的、生产级别的应用程序。它基于Spring框架，通过自动化配置和约定优于配置的原则，大大简化了Spring...
spring boot 整合dubbo zookeeper
08-24
spring boot 整合dubbo zookeeper
狂神说SpringBoot17：Dubbo和Zookeeper集成.zip
03-11
狂神说SpringBoot17：Dubbo和Zookeeper集成_狂神说-CSDN博客 https://blog.csdn.net/qq_33369905/article/details/106647287。我跟着做了一下，成功实现了。这里打包的是根据上面那个文章，配置好的dubbo-admin和zookeeper和文章里的SpringBoot + Dubbo + zookeeper的整合小项目。没要积分，免费。
SpringBoot + Dubbo + zookeeper
weixin_45723046的博客
05-20 1017
六、SpringBoot + Dubbo + zookeeper 环境搭建 1、启动zookeeper ！ 2、IDEA创建一个空项目； 3、创建一个模块，实现服务提供者：provider-server ， 选择web依赖即可 4、项目创建完毕，我们写一个服务，比如卖票的服务； 创建的是Maven项目 编写接口 package com.baidu.service; public interface TicketService { public String getTicket(); } 接口的
SpringBoot+Dubbo+Zookeeper
zekeTao的博客
05-17 766
一、安装Zookeeper单机版（只用于demo，所以在Windows下安装）官网下载http://zookeeper.apache.org/二、下载后解压，重命名，移至D:\devsoft\zookeeper三、在D:\devsoft\zookeeper 新建data及log目录四、到D:\devsoft\zookeeper\conf 下复制 zoo_sample.cfg 并粘贴到当前目录下，命...
Spring Boot 整合Dubbo + Zookeeper 实现分布式 消费者与服务者的业务调用
2401_84091544的博客
05-03 854
《一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码》，点击传送门，即可获取！示意图详细版本RPC两个核心模块：序列化和通讯三、Dubbo的特点及好处================================================================================Apache Dubbo |ˈdʌbəʊ| 提供了六大核心能力：面向接口代理的高性能RPC调用，智能容错和负载均衡，服务自动注册和发现，高度可扩展能力，运行期流量调度，可视化的服务
【Spring Boot】Spring Boot整合dubbo+zookeeper
我们的目标是什么？没有蛀牙！！！
02-20 144
API接口部分 定义一些接口和相关的bean。 注意：bean需要实现Serializable接口，否则会报序列化错误。 服务提供者 注意：移除zookeeper中的slf4j依赖。 pom.xml <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" x...
Springboot使用Zookeeper
青春不散场的专栏
08-31 989
zk可以作为注册中心和配置中心。
springboot + dubbo+zookeeper 微服务
08-09
Spring Boot是一个开源的Java框架，用于快速构建独立的、基于...综上所述，Spring Boot结合Dubbo和Zookeeper可以构建高效、可靠的微服务架构，并提供了便利的开发和部署方式，帮助开发人员构建高性能的分布式应用程序。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值