SpringBoot 学习（十）分布式理论

最新推荐文章于 2024-01-28 14:30:32 发布
最新推荐文章于 2024-01-28 14:30:32 发布
阅读量497 收藏
点赞数 1
分类专栏： SpringBoot 文章标签： spring boot 学习 分布式
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_42651415/article/details/133273659
版权

12. 分布式理论

12.1 简介

  • 分布式系统是若干独立计算机的集合，这些计算机对于用户来说就像单个相关系统。

  • 分布式是一组通过网络进行通信、为了完成共同的任务而协调工作的计算机节点组成的系统，其目的是利用更多的机器，处理更多的数据。

  • 小饭店原来只有一个厨师，切菜洗菜备料炒菜全干。后来客人多了，厨房一个厨师忙不过来，又请了个厨师，两个厨师都能炒一样的菜，这两个厨师的关系是集群。为了让厨师专心炒菜，把菜做到极致，又请了个配菜师负责切菜，备菜，备料，厨师和配菜师的关系是分布式，一个配菜师也忙不过来了，又请了个配菜师，两个配菜师关系是集群。

    ​ —— 张鹏飞

  • 分布式架构四个核心问题

    • 多服务，客户端如何访问？— API 网关，服务路由
    • 多个服务之间如何通信？— HTTP，RPC框架，异步调用
    • 多服务如何治理？— 服务注册与发现，高可用
    • 服务挂了，怎么办？— 熔断机制，服务降级

12.2 Dubbo

(1) 背景

● 架构

随着互联网的发展，网站应用的规模不断扩大，常规的垂直应用架构已无法应对，分布式服务架构以及流动计算架构势在必行，亟需一个治理系统确保架构有条不紊的演进。

在这里插入图片描述

单一应用架构（All in One）

当网站流量很小时，只需一个应用，将所有功能都部署在一起，以减少部署节点和成本。此时，用于简化增删改查工作量的数据访问框架(ORM)是关键。

垂直应用架构（Vertical Application）

当访问量逐渐增大，单一应用增加机器带来的加速度越来越小，提升效率的方法之一是将应用拆成互不相干的几个应用，以提升效率。此时，用于加速前端页面开发的Web框架(MVC)是关键。

分布式服务架构（Distributed Service）

当垂直应用越来越多，应用之间交互不可避免，将核心业务抽取出来，作为独立的服务，逐渐形成稳定的服务中心，使前端应用能更快速的响应多变的市场需求。此时，用于提高业务复用及整合的分布式服务框架(RPC)是关键。

流动计算架构（Elastic Computing）

当服务越来越多，容量的评估，小服务资源的浪费等问题逐渐显现，此时需增加一个调度中心基于访问压力实时管理集群容量，提高集群利用率。此时，用于提高机器利用率的资源调度和治理中心(SOA)是关键。

● RPC

  • RPC（Remote Procedure Call）远程过程调用，简单的理解是一个节点请求另一个节点提供的服务

  • 本地过程调用

    直接调用，函数体通过函数指针来指定。
    在这里插入图片描述

  • 远程过程调用

    // Client端 
1. 将调用映射为 (函数,进程 ID)。
2. 将 (函数,进程 ID) 序列化，以二进制形式打包
3. 把 2 中得到的数据包发送给 Server，这需要使用网络传输层
4. 等待服务器返回结果
5. 如果服务器调用成功，那么就将结果反序列化.

    // Server端
1. 在本地维护 (函数,进程ID) 到函数指针的映射，可以用 Map<String, Method> map
2. 等待客户端请求
3. 得到一个请求后，将其数据包反序列化，得到 (函数,进程ID)
4. 通过在 map 中查找，得到相应的函数指针
5. 本地调用函数，得到结果
6. 将结果序列化后通过网络返回给 Client

    在这里插入图片描述

(2) 概念

  • Dubbo 是一个高性能优秀的服务框架，它使应用可通过高性能的 RPC 实现服务的输出和输入功能，可以和 Spring 框架无缝集成。

在这里插入图片描述

  • 节点角色说明
节点角色说明
Provider暴露服务的服务提供方
Consumer调用远程服务的服务消费方
Registry服务注册与发现的注册中心
Monitor统计服务的调用次数和调用时间的监控中心
Container服务运行容器

(3) 安装

  • 下载地址：apache/dubbo-admin at master (github.com)

  • 指定 zookeeper 注册地址

    # dubbo-admin-master-0.2.0\dubbo-admin\src\main\resources\application.properties
server.port=7001
spring.velocity.cache=false
spring.velocity.charset=UTF-8
spring.velocity.layout-url=/templates/default.vm
spring.messages.fallback-to-system-locale=false
spring.messages.basename=i18n/message
spring.root.password=root
spring.guest.password=guest
# 注册地址
dubbo.registry.address=zookeeper://127.0.0.1:2181

  • 在项目目录下打包 dubbo-admin

    mvn clean package -Dmaven. test. skip=true

    • 配置 maven 的环境变量
    • 以管理员身份运行 cmd
    • 在 dubbo 目录下运行cmd，执行命令

    在这里插入图片描述

    在这里插入图片描述

(4) 测试

  • 启动 zookeeper

  • 启动 dubbo

    java -jar dubbo-admin-0.0.1-SNAPSHOT.jar

  • 浏览器访问 http://localhost:7001/，默认用户名和密码都为 root

在这里插入图片描述

12.3 Zookepper

● 简介

● 启动服务

  • 以管理员身份运行 zkService.cmd

  • 服务闪退问题

    • 没有配置 zoo.cfg 配置文件

  • 解决方案

    • 编辑 zkService.cmd 文件，末尾添加 pause ，暂停服务，便于查找错误。

      在这里插入图片描述

    • 程序未找到 zoo.cfg

      在这里插入图片描述

    • 复制 conf/zoo_sample.cfg 改名为 zoo.cfg

      在这里插入图片描述

    • 再次以管理员身份启动 zkService.cmd

      在这里插入图片描述

    • 测试

      • 打开用户端 bin/zkCli.cmd

        在这里插入图片描述

        在这里插入图片描述

        在这里插入图片描述

12.4 springboot+dubbo+zookeeper

(1) 建立空工程，创建两个 springboot 服务模块

在这里插入图片描述

(2) 为模块添加服务

● provider-server
<!--pom.xml-->
<!--dubbo-->
<dependency>
   <groupId>org.apache.dubbo</groupId>
   <artifactId>dubbo-spring-boot-starter</artifactId>
   <version>2.7.3</version>
</dependency>

<!--zkCli-->
<!-- https://mvnrepository.com/artifact/com.github.sgroschupf/zkclient -->
<dependency>
   <groupId>com.github.sgroschupf</groupId>
   <artifactId>zkclient</artifactId>
   <version>0.1</version>
</dependency>

<!--zookeeper-->
<dependency>
   <groupId>org.apache.curator</groupId>
   <artifactId>curator-framework</artifactId>
   <version>4.1.0</version>
</dependency>
<!--解决报错：java.lang.NoClassDefFoundError: org/apache/curator/framework/recipes/cache/TreeCacheListener-->
<!-- https://mvnrepository.com/artifact/org.apache.curator/curator-recipes -->
<dependency>
   <groupId>org.apache.curator</groupId>
   <artifactId>curator-recipes</artifactId>
   <version>4.2.0</version>
</dependency>

<dependency>
   <groupId>org.apache.zookeeper</groupId>
   <artifactId>zookeeper</artifactId>
   <version>3.4.14</version>
   <!--排除 slf4j-log4j12，避免日志冲突-->
   <exclusions>
      <exclusion>
         <groupId>org.slf4j</groupId>
         <artifactId>slf4j-log4j12</artifactId>
      </exclusion>
   </exclusions>
</dependency>

# application.properties
server.port=8001

# 服务应用名字
dubbo.application.name=provider-server
# 注册中心地址，即存放服务的地址
dubbo.registry.address=zookeeper://127.0.0.1:2181
# 待注册的服务
dubbo.scan.base-packages=com.why.service

// service
public interface TicketService {
    public String getTicket();
}

// service
// zookeeper：服务注册与发现
// 项目已启动就自动注册到注册中心
// 注意使用 dubbo 的 Service 注解
@Service
@Component
public class TicketServiceImpl implements TicketService {
    @Override
    public String getTicket() {
        return "Train Ticket";
    }
}
● consumer-server
<!--pom.xml-->
<!--dubbo-->
<dependency>
   <groupId>org.apache.dubbo</groupId>
   <artifactId>dubbo-spring-boot-starter</artifactId>
   <version>2.7.3</version>
</dependency>

<!--zkCli-->
<!-- https://mvnrepository.com/artifact/com.github.sgroschupf/zkclient -->
<dependency>
   <groupId>com.github.sgroschupf</groupId>
   <artifactId>zkclient</artifactId>
   <version>0.1</version>
</dependency>

<!--zookeeper-->
<dependency>
   <groupId>org.apache.curator</groupId>
   <artifactId>curator-framework</artifactId>
   <version>4.1.0</version>
</dependency>
<!--解决报错：java.lang.NoClassDefFoundError: org/apache/curator/framework/recipes/cache/TreeCacheListener-->
<!-- https://mvnrepository.com/artifact/org.apache.curator/curator-recipes -->
<dependency>
   <groupId>org.apache.curator</groupId>
   <artifactId>curator-recipes</artifactId>
   <version>4.2.0</version>
</dependency>

<dependency>
   <groupId>org.apache.zookeeper</groupId>
   <artifactId>zookeeper</artifactId>
   <version>3.4.14</version>
   <!--排除 slf4j-log4j12，避免日志冲突-->
   <exclusions>
      <exclusion>
         <groupId>org.slf4j</groupId>
         <artifactId>slf4j-log4j12</artifactId>
      </exclusion>
   </exclusions>
</dependency>

# application.properties
server.port=8002

# 消费者取服务，需要暴露自己的名字
dubbo.application.name=consumer-server
# 注册中心的地址，即取服务的地址
dubbo.registry.address=zookeeper://127.0.0.1:2181

// service
public interface UserService {
    public void buyTick();
}

// service
// 此处的 @Service 是将实现类注册到 Spring 中，注意导包路径
@Service
public class UserServiceImpl implements UserService {

    // 在注册中心拿到 provider-server 的服务
    // 本地可定义与 provider-server 端路径相同的接口，使用 @Reference 引用 provider-server 端注册在注册中心的服务
    @Reference
    private TicketService ticketService;

    @Override
    public void buyTick() {
        String ticket = ticketService.getTicket();
        System.out.println("在注册中心拿到=>" + ticket);
    }
}

// service
public interface TicketService {
    public String getTicket();
}
● 启动服务

  • 启动 zkService

  • 启动 dubbo-admin 程序

  • 启动 provider-server 服务

    在这里插入图片描述

    在这里插入图片描述

    在这里插入图片描述

  • 编写并启动 consumer-server 测试

    @Test
void testBuyTick() {
   userService.buyTick();
}

    在这里插入图片描述

    consumer-server 服务并未编写实现类实现 TicketService 接口，此为 consumer-server 在注册中心拿到的结果。即执行了如下过程：

    在这里插入图片描述

Uanmo
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
springboot+websocket分布式实现
11-17
实现原理，使用redis作为消息队列，将收到的消息广播到各个实例，每个实例在推送对应的数据。基于redis实现的分布式websocket推送
SpringBoot开发案例 分布式集群共享Session详解
08-25
主要介绍了SpringBoot开发案例 分布式集群共享Session详解，在分布式系统中，为了提升系统性能，通常会对单体项目进行拆分，分解成多个基于功能的微服务，可能还会对单个微服务进行水平扩展，保证服务高可用,需要的朋友可以参考下
SpringBoot集成分布式事务技术
最新发布
禅与计算机程序设计艺术
01-28 717
1.背景介绍 1. 背景介绍 分布式事务是一种在多个独立的系统之间进行事务处理的方式。在微服务架构中，分布式事务是非常常见的需求。Spring Boot 是一个用于构建微服务的框架，它提供了一些分布式事务解决方案，如 Spring Cloud Stream、Spring Cloud Task 和 Spring Cloud Data Flow 等。 在本文中，我们将深入探讨 Spring Bo...
springboot集成dubbo分布式框架
08-01
使用springboot+mybatis，集成dubbo分布式框架，注册中心使用zookeeper，数据库使用mysql。项目是聚合项目，可发布到tomcat中启动，配置好注册中心zookeeper和mysql后，即可启动访问消费者platform_web调用platform_service服务。
Springboot+HSF分布式服务框架+EDAS注册中心，实现发布订阅模式
02-12
Springboot+HSF分布式服务框架+EDAS注册中心，实现发布订阅模式
基于springboot整理的分布式事务及动态数据源切换
04-17
整理的分布式事务 及动态数据源切换 基于数据库XA协议 maven 包可直接使用 maven 引入路径: com.maple DCSDataSourcesServer 0.0.1-SNAPSHOT 事务及数据源标签使用方式: @Transactional 正常标注在interface上即可 需在切换数据源之前启动事务 @DynamicDBSource("run") 可标注在server层也可以标注在Dao层 即可指定方法内使用的数据源
SpringBoot 分布式系统简单了解
qq_43560701的博客
01-31 6245
SpringBoot 分布式系统简单了解 SpringBoot 框架的使用基本是了解的差不多了，马上就进入微服务的阶段了，在此之前必须要了解什么是分布式系统。 1. 分布式系统简介 分布式系统（distributed system）是建立在网络之上的软件系统。在《分布式系统原理与范型》书中有分布式系统的定义：“分布式系统是若干独立计算机的集合，这些计算机对于用户来说就像单个相关系统”。 分布式系统是由一组通过网络进行通信、为了完成共同的任务而协调工作的计算机节点组成的系统。分布式系统的出现是为了用廉价的、普
SpringBoot(十三)——分布式
weixin_44240370的博客
05-18 427
文章目录十七、SpringBoot与分布式Dubbo/Zookeeper1、分布式应用2、Zookeeper和Dubbo3、搭建环境4、实现Dubbo的RPC功能<1>、配置服务端的Dubbo和Zookeeper依赖并注册地址<2>、使用@Service将服务发布出去<3>、配置客户端的Dubbo和Zookeeper依赖并注册地址<4>、服务端的接口...
Dubbo整合SpringBoot使用，入门
h1012946585的博客
09-18 1134
文章目录Dubbo初探几个问题Dubbo组成部分注册中心服务提供者服务消费者结果结语 Dubbo初探 几个问题 什么是RPC？为什么我要用RPC？什么是Dubbo？ RPC:(Remote Procedure Call) 该协议允许运行于一台计算机的程序调用另一个地址空间（通常为一个开放网络的一台计算机）的子程序，而程序员就像调用本地程序一样，无需额外地为这个交互作用编程（无需关注细节）。RPC是一种服务器-客户端（Client/Server）模式，经典实现是一个通过发送请求-接受回应进行信息交互的系统。
spring boot 分布式事务解决方案
热门推荐
人生若只初相见@的博客
11-27 2万+
对比LCN和saga(华为apache孵化器项目) ，LCN使用代理连接池封装补偿方法，saga需要手工写补偿方法，相对来说LCN使用更加方便。 参考官方地址： https://github.com/codingapi/tx-lcn/wiki/TxManager%E5%90%AF%E5%8A%A8%E8%AF%B4%E6%98%8E 一. 原理 事务控制原理![在这里插入图片描述](https://img-blog.csdnimg.cn/20201127180818914.jpg?x-oss-pr
SpringCloud基于SpringBoot 分布式服务实现
03-14
SpringCloud基于SpringBoot 分布式服务实现，暂时实现了服务发现，rabbin和fegin两种调用方式，负载均衡、只能路由后续会持续更新代码（自己学习分布式服务架构，之前有dubbo开发经验，想去学习Spring全家桶）
springboot+dubbo分布式架构，提供分布式缓存、分布式锁、分布式Session、读写分离
05-15
数据库：Druid数据库连接池，监控数据库访问性能，统计SQL的执行性能。 持久层：mybatis持久化，使用MyBatis-Plus优化，减少sql开发量；aop切换数据库实现读写分离。Transtraction注解事务。 MVC： 基于spring mvc注解,Rest风格Controller。Exception统一管理。 缓存和Session：注解redis缓存数据，Spring-session和redis实现分布式session同步，重启服务会话不丢失。 数据同步：基于redis的分布式锁。 Web安全：实现XSS过滤和CSR过滤。 多系统交互：Dubbo,ActiveMQ多系统交互。 前后端分离：前端使用ajax访问后端的rest服务，后端返回json格式数据。页面用nginx反向代理访问。 支付功能：实现微信和支付宝支付客户端。 日志：Logback打印日志，默认打印Web和Service简要日志。 工具类：字符串处理，类型转换，日期处理，IO和文件，Excel读写，加密解密，HTTP客户端，XML处理，转码，各种Util等等。 代码生成器：根据数据库表结构生成简单的增删改查功能代码，包括model、mapper、service、controller。
springboot大型java电商分布式解决方案实战视频
04-02
dubbox springboot 消息中间件 solr CAS 缓存策略 跨域解决方案
Spring Boot+Druid+Mybatis实现JTA分布式事务
08-27
Spring Boot+Druid+Mybatis实现JTA分布式事务
springboot基于redis分布式锁
11-06
SpringBoot基于redis的分布式锁,有word使用文档,根据文档配置即可使用
springboot 搭建分布式_Spring Boot 运作原理
weixin_39698007的博客
11-22 145
1、Spring Boot 简介SpringBoot是由Pivotal团队提供的全新框架，其设计目的是用来简化新Spring应用的初始搭建以及开发过程。该框架使用了特定的方式来进行配置，从而使开发人员不再需要定义样板化的配置。通过这种方式，Boot致力于在蓬勃发展的快速应用开发领域（rapid application development）成为领导者。如果想学习Java工程化、高性能及分布式、深...
Spring Boot实现分布式事务的协调和管理
算命de博客
06-08 1459
在现代的分布式系统中，往往存在多个服务协同完成一个业务操作的情况。而在这种情况下，如何保证所有服务的数据一致性成为了一个重要的问题。Spring Boot作为一个流行的Java开发框架，提供了多种方法来实现分布式事务的协调和管理。本文将介绍一些常用的方式和技术来解决分布式事务的问题。
SpringBoot分布式框架
weixin_62421895的博客
07-28 997
在文章正式开始之前，我分享下一个系统，它的架构如下：每次当我查问题的时候，我都能把问题初步定位在 逻辑层 ，但为了能给业务方交代，我需要 给证据 业务方面（日志信息就是铁证）。一个请求肯定是被这8台机器内的某一台处理，但具体是哪一台，我不知道。所以，我需要上每台机器上 grep 一把日志，然后才能找出对应的日志证明我的分析。有的时候，可能 接入层 也需要一起参与进去，就排查一个问题，人都傻了了（翻看日志的时间占用了太久了）。后来啊，看了同事的骚操作（在 item2 编写脚本： 快速登录堡垒机 （免去输入账号
springboot 下的分布式定时任务
08-01
在SpringBoot中，可以使用ShedLock来实现分布式定时任务。ShedLock是一个用于解决分布式定时任务问题的库。它可以确保在集群部署的情况下，同一个定时任务只会在一个节点上执行，避免多个节点同时执行同一个定时任务...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值