ZooKeeper——学习笔记2

最新推荐文章于 2023-11-19 16:03:51 发布
最新推荐文章于 2023-11-19 16:03:51 发布
阅读量118 收藏
点赞数
分类专栏： 开发文档 工作心得 文章标签： ZooKeeper  
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhangbomk/article/details/90454492
版权

ZooKeeper 的应用场景

典型的发布/订阅模式的分布式数据管理与协调框架

ZooKeeper 解决了什么问题？

  1. 高性能使得 ZooKeeper 能够应用于对系统吞吐有明确要求的大型分布式系统
  2. 高可用可以解决分布式的单点问题
  3. 具有严格的顺序访问控制能力，主要是针对写操作的严格顺序性，使得客户端可以基于 ZooKeeper 来实现一些复杂的同步原语

利用 ZooKeeper 可以非常方便构建一系列分布式应用中都会涉及到的核心功能。

  1. 数据发布/订阅
  2. 负载均衡
  3. 命名服务
  4. 分布式协调/通知
  5. 集群管理
  6. Master 选举
  7. 分布式锁
  8. 分布式队列

  ZooKeeper 在大型分布式系统的应用:

Hadoop 利用 ZooKeeper 实现了高可用的功能，包括 HDFS 的 NameNode 和 YARN 的 ResourceManager。此外 YARN 的运行状态是利用 ZooKeeper 来存储的

Kafka 中大部分组件都应用了 ZooKeeper

Dubbo 基于 ZooKeeper 实现了服务注册中心

 

 

Burr
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
zookeeper——学习笔记
shaoye_csdn1的博客
07-03 188
文章目录zookeeper 简介什么是 zookeeper，干什么用的？集群和 节点分布式应用的一些挑战zk 提供的常见服务如下：zookeeper 基础zookeeper 的层次命名空间config 和workers zookeeper 简介 什么是 zookeeper，干什么用的？ 分布式协调服务，用于管理大型主机。zookeeper通过简单的架构和API解决服务管理问题。 集群和 节点 分布...
ZooKeeper——学习笔记
tb_0840297的专栏
05-22 165
一、什么是ZooKeeper ZooKeeper主要服务于分布式系统，可以用ZooKeeper来做：统一配置管理、统一命名服务、分布式锁、集群管理。 使用分布式系统就无法避免对节点管理的问题(需要实时感知节点的状态、对节点进行统一管理等等)，而由于这些问题处理起来可能相对麻烦和提高了系统的复杂性，ZooKeeper作为一个能够通用解决这些问题的中间件就应运而生了。 ZooKee...
大数据——Zookeeper学习笔记
koooooooo5的博客
05-08 273
具体代码可以参考： https://github.com/Ostrich5yw/java4BigData
Zookeeper学习笔记（1）—— 基础知识
WHY的博客
11-15 1160
本文介绍了zookeeper框架的基础知识，包括工作机制、集群搭建流程、leader选举机制以及命令行操作等内容
Zookeeper学习笔记（2）—— Zookeeper API简单操作
最新发布
WHY的博客
11-19 530
zookeeper中API的简单操作
zookeeper学习笔记(最全）
洛柒
11-30 1658
zookeeper学习笔记(最全） zookeeper解决并发问题——分布式锁
Linux学习笔记——ZooKeeper集群安装部署
kuaixiao0217的博客
01-10 730
主要介绍了ZooKeeper集群在Linux系统上的安装部署
学习笔记-zookeeper
u010230019的博客
10-22 666
zookeeper学习笔记
ZooKeeper学习笔记（一）
JiaXingNashishua的博客
09-06 207
Zookeeper 是一个开源的分布式的，为分布式框架提供协调服务的 Apache 项目。
zookeeper完整学习笔记
03-28
- 概述 - 术语 - 分布式应用 - 介绍 - 架构 - 工作流 - Leader选举 - 安装服务 - CLI 操作 - java-api - 动态感知服务器上下线 - 实现Hadoop高可用（Hadoop-HA-High Availability）
12zookeeper——好程序
01-07
zk集群的角色主要有2种：leader和follower 选举机制 zookeeper集群的特性 zookeeper集群：一个leader，多个follower（zookeeper的老大是选举的，hdfs的老大是指定的） 全局一致性：每个server保存一份相同的数据副本...
Zookeeper学习笔记
03-07
今晚上在上传学习笔记的时候，看了之前发布的文章，突然发现对于我上传的学习笔记是没有展示出来的，所以在这里对笔记进行重新的上传。不知道能不能上传成功！
zookeeper学习笔记
01-18
zookeeper学习笔记
Zookeeper学习笔记.pdf
09-10
ZooKeeper在实现这些服务时，首先它设计一种新的**数据结构——Znode**，然后在该数据结构的基础上定义了一些**原语**，也就是一些关于该数据结构的一些操作。有了这些数据结构和原语还不够，因为我们的ZooKeeper是...
项目总结
tb_0840297的专栏
03-23 977
1引言 1.1编写目的 对此次软件项目开发进行总结，并且分析此次项目实际开发过程与项目计划的差别，以及项目开发过程中出现的各种问题和优势，对这些进行总结，防止以后同样错误及问题的发生。 1.2背景 1、本项目的名称： 局域网聊天软件 2、所开发出来的软件系统的名称： 局域网聊天工具 3、本软件的任务提出者： 指导老师 4、本软件的开发者： 李乾杰、刘事成、刘婧、刘鑫、张波、张
MongoDB地理空间检索
tb_0840297的专栏
07-03 810
在Mongodb种，想要运用它的地理空间检索，必须给相应字段建立索引，主要有2d、2dsphere这两种索引， 建立的语法分别为： db.集合名.createIndex({"字段1": "2d"}) db.集合名.createIndex({"字段2": "2dsphere"}) $near、$nearSphere是Mongodb中用来获取某一基准点的邻近点、并且由近至远排好序的操作。他们都...
多线程的问题
tb_0840297的专栏
03-24 489
当线程休眠时间的不同时，三个线程的顺序会有所不同 public class SumThread implements Runnable{ private Sum sd; private int sum=0; private String name; public SumThread(String name,Sum sd){ this.name = name; this
java网络编程socket
tb_0840297的专栏
03-24 451
/**  * B 端  * 功能：与A端通信  *   */ package com.qq.socket; import java.io.IOException; import java.net.DatagramPacket; import java.net.DatagramSocket; import java.net.InetAddress; import
Kakfa学习笔记（二）——体验Kafka
05-24
在开始体验 Kafka 之前，我们需要先下载并安装 Kafka。 Kafka 的官方网站为：https://kafka.apache.org/ ，在该网站的“Downloads”页面中，我们可以找到 Kafka 的二进制文件，选择合适的版本进行下载。 本篇文章将以 Kafka 2.8.0 版本为例进行演示。 ## 安装 Kafka 1. 解压 Kafka 压缩包 将下载的 Kafka 压缩包解压到本地文件夹中，例如：`/usr/local/kafka_2.13-2.8.0/`。 2. 配置环境变量 将 Kafka 的 bin 目录添加到 PATH 环境变量中，以便在终端中能够直接执行 Kafka 的命令。 ```bash export PATH=/usr/local/kafka_2.13-2.8.0/bin:$PATH ``` 可以将该命令添加到 `~/.bashrc` 或 `~/.zshrc` 文件中，以便每次打开终端时自动加载。 ## 启动 Kafka Kafka 的启动需要同时启动 ZooKeeper 和 Kafka 服务。 ### 启动 ZooKeeper Kafka 使用 ZooKeeper 来存储集群的元数据和状态信息。在启动 Kafka 之前，我们需要先启动 ZooKeeper。 在终端中执行以下命令来启动 ZooKeeper： ```bash zookeeper-server-start.sh config/zookeeper.properties ``` 该命令将会默认使用 Kafka 的配置文件中的 `zookeeper.properties` 进行启动，该文件位于 Kafka 的安装目录下的 `config` 目录中。 ### 启动 Kafka 在启动 Kafka 之前，我们需要先创建一个 Kafka 主题（Topic），用于存储消息。 在终端中执行以下命令来创建一个名为 `test` 的主题： ```bash kafka-topics.sh --create --bootstrap-server localhost:9092 --replication-factor 1 --partitions 1 --topic test ``` 该命令将会使用默认配置，在本地的 Kafka 服务中创建一个名为 `test` 的主题。 接下来，在终端中执行以下命令来启动 Kafka： ```bash kafka-server-start.sh config/server.properties ``` 该命令将会默认使用 Kafka 的配置文件中的 `server.properties` 进行启动，该文件位于 Kafka 的安装目录下的 `config` 目录中。 ### 发送和接收消息 Kafka 提供了一个命令行工具 `kafka-console-producer.sh`，用于向 Kafka 主题中发送消息。 在终端中执行以下命令来发送消息： ```bash kafka-console-producer.sh --broker-list localhost:9092 --topic test ``` 该命令将会打开一个新的终端窗口，在该窗口中输入要发送的消息，按下回车键即可发送。 Kafka 还提供了一个命令行工具 `kafka-console-consumer.sh`，用于从 Kafka 主题中接收消息。 在终端中执行以下命令来接收消息： ```bash kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning ``` 该命令将会打开一个新的终端窗口，用于显示从 Kafka 主题中接收到的消息。 在上述两个终端窗口中，可以分别输入和接收消息，进行 Kafka 的体验和测试。 ## 关闭 Kafka 在终端中执行以下命令来关闭 Kafka： ```bash kafka-server-stop.sh ``` 该命令将会停止当前正在运行的 Kafka 服务。 同样地，我们也需要关闭 ZooKeeper 服务： ```bash zookeeper-server-stop.sh ``` ## 总结 通过本篇文章的演示，我们学习了如何下载、安装和启动 Kafka，并且体验了 Kafka 的基本功能，包括创建主题、发送消息和接收消息等。 在实际的生产环境中，我们需要对 Kafka 进行更加详细的配置和管理，以便保证 Kafka 的高可用性、高性能和高可靠性。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值