ZooKeeper 3.0.0发行说明

最新推荐文章于 2023-03-21 17:57:36 发布
最新推荐文章于 2023-03-21 17:57:36 发布
阅读量335 收藏
点赞数
分类专栏： Unix&Unix-Like ZooKeeper ZooKeeper 文章标签： ZooKeeper 3.0.0发行说明
Unix&Unix-Like 同时被 3 个专栏收录
399 篇文章 5 订阅
订阅专栏
ZooKeeper
17 篇文章 0 订阅
订阅专栏
ZooKeeper
17 篇文章 1 订阅
订阅专栏

 

ZooKeeper 3.0.0发行说明

这些发行说明包括新的开发人员和面向用户的不兼容性，功能和主要改进。

升级到3.0.0时的迁移说明

如果要从以前版本的ZooKeeper升级到版本3.0.0，则只需阅读本节，otw跳到更改

此版本中的少量更改导致非向后兼容的Zookeeper客户端用户代码和服务器实例数据。以下说明提供了有关如何将代码和日期从2.2.1版迁移到3.0.0版的详细信息。

注意：当对源代码进行向后不兼容的更改时，ZooKeeper会增加主版本号（major.minor.fix）。作为从SourceForge迁移的一部分，我们更改了包结构（com.yahoo.zookeeper。*到org.apache.zookeeper。*），并认为现在是合并我们一直拒绝的一些更改的好时机。因此，从2.2.1迁移到3.0.0版本的ZooKeeper时，将需要以下内容。

迁移客户端代码

在ZooKeeper 3.0.0版中，底层客户端 - 服务器协议已更改。因此，客户端必须与服务群集一起升级，以确保系统正常运行（旧的3.0.0之前的客户端不能保证对升级的3.0.0服务器运行，反之亦然）。

观察管理

在以前的ZooKeeper版本中，如果客户端丢失了与ZooKeeper服务器的连接，则客户端注册的任何手表都将丢失。这意味着开发人员必须跟踪他们感兴趣的手表，并在收到会话断开事件时重新注册。在此版本中，客户端库跟踪客户端已注册的监视，并在与新服务器建立连接时重新注册监视。只要能够处理未经请求的手表，仍然可以手动重新注册兴趣的应用程序应继续正常工作。例如，旧应用程序可能会为/ foo和/ goo注册监视，丢失连接，并仅重新注册/ goo。只要应用程序能够接收/ foo的通知（可能忽略它），就不需要更改它。手表管理的一个警告：

此版本还允许客户端指定特定于呼叫的监视功能。这使开发人员能够在不同的监视功能中模块化逻辑，而不是在连接到ZooKeeper句柄的监视功能中填充所有内容。呼叫特定监视功能只要它们处于活动状态就会接收所有会话事件，但只会接收它们注册的监视回调。

Java API

  1. java包结构已从com.yahoo.zookeeper * 更改为org.apache.zookeeper *。这可能会影响所有使用ZooKeeper API的java代码（通常是import语句）
  2. 使用枚举（而不是整数）重新指定客户端ZooKeeper API中使用的许多常量。有关详细信息，请参阅ZOOKEEPER-7，ZOOKEEPER-132和ZOOKEEPER-139
  3. ZOOKEEPER-18删除了KeeperStateChanged，改为使用KeeperStateDisconnected

另请参阅当前的Java API

C API

  1. 为了减少命名空间冲突，重命名了客户端ZooKeeper API中使用的许多常量，有关详细信息，请参阅ZOOKEEPER-6

迁移服务器数据

以下问题导致磁盘数据格式（ZK数据目录中包含的快照和事务日志文件）发生更改，并且需要运行迁移实用程序。

将ZooKeeper服务器实例升级到3.0.0版时，必须运行以下一次，并且只运行一次。

注意

下面引用的和目录分别由ZooKeeper配置文件中的dataLogDir 和dataDir规范指定。如果未在ZooKeeper服务器配置文件中明确指定，dataLogDir默认为dataDir的值（在这种情况下，为升级实用程序提供两个参数的相同目录）。

  1. 关闭ZooKeeper服务器群集。

  2. 备份您的和目录

  3. 使用运行升级

    • bin/zkServer.sh upgrade <dataLogDir> <dataDir>

    要么

    • java -classpath pathtolog4j:pathtozookeeper.jar UpgradeMain <dataLogDir> <dataDir>

    where 存储所有事务日志（log。）的目录。是存储所有快照（快照。）的目录。

  4. 重新启动群集。

如果在升级过程中出现任何故障，请继续阅读以清理数据库。

这就是ZooKeeper中升级的工作原理。这将有助于您在升级时遇到问题时进行故障排除

  1. 从升级移动文件<dataLogDir>，并<dataDir>以<dataLogDir>/version-1/和<dataDir>/version-1分别（版本1子目录被升级程序创建）。
  2. 升级会创建一个新版本的子目录<dataDir>/version-2和<dataLogDir>/version-2
  3. 升级将旧数据库从内存中读取<dataDir>/version-1并<dataLogDir>/version-1进入内存，并创建新的升级快照。
  4. 升级将新数据库写入<dataDir>/version-2。

故障排除。

  1. 如果您在2.0数据库上没有从2.0升级而启动ZooKeeper 3.0 - 服务器将启动一个空数据库。这是因为服务器假设<dataDir>/version-2并且<dataLogDir>/version-2将使数据库开始。由于在没有升级的情况下它将为空，因此服务器将以空数据库开头。在这种情况下，关闭ZooKeeper服务器，删除版本2目录（请记住，这将导致在启动3.0后丢失更新。）然后启动升级过程。
  2. 如果试图重命名文件到版本1目录升级失败，你应该尝试和移动下的所有文件<dataDir>/version-1 ，并<dataLogDir>/version-1以<dataDir>和<dataLogDir>分别。然后再次尝试升级。
  3. 如果您不希望使用ZooKeeper 3.0运行并且更喜欢使用ZooKeeper 2.0运行并且已经升级 - 您可以运行ZooKeeper 2 <dataDir>并将<dataLogDir>目录更改为<dataDir>/version-1和<dataLogDir>/version-1。请记住，您将丢失升级后所做的所有更新。

迁移服务器配置

ZooKeeper服务器配置文件发生了重大变化。

由electionAlg配置属性指定的默认选举算法已从默认值0更改为默认值3。请参阅 管理员指南的“ 群集选项”部分，特别是electionAlg和server.X属性。

您将需要将electionAlg显式设置为其先前的默认值0或更改您的server.X选项以包括领导者选举端口。

自ZooKeeper 2.2.1以来的变化

版本2.2.1代码，文档，二进制文件等仍然可以在SourceForge上访问

问题笔记
ZOOKEEPER-43服务器端自动重置手表。
ZOOKEEPER-132创建枚举以替换ZooKepper.create方法中的CreateFlag
ZOOKEEPER-139为WatcherEvent的KeeperState和EventType创建枚举
ZOOKEEPER-18守门员状态不一致
ZOOKEEPER-38日志/快照文件中的标头
ZOOKEEPER-8统计包含数量的子项和大小
ZOOKEEPER-6zookeeper.h中的问题标识符列表
ZOOKEEPER-7对于类型和状态，请使用枚举而不是整数
ZOOKEEPER-27服务器和客户端的唯一DB标识符
ZOOKEEPER-32ZooKeeper数据的CRC
ZOOKEEPER-33更好的ACL管理
ZOOKEEPER-203在releasenotes中修复datadir拼写错误
ZOOKEEPER-145为从2.x迁移到3.0的用户编写详细的发行说明
ZOOKEEPER-23重新连接时手表自动重置
ZOOKEEPER-191forrest docs升级。
ZOOKEEPER-201读取快照和事务日志时验证幻数
ZOOKEEPER-200快照和日志的幻数必须不同
ZOOKEEPER-199修复持久性代码中的日志消息
ZOOKEEPER-197为快照创建校验和
ZOOKEEPER-198FollowerSyncRequest.java中缺少apache许可证头
ZOOKEEPER-5Zookeeper服务器中的升级功能。
ZOOKEEPER-194修复zookeeperAdmin.xml中的术语
ZOOKEEPER-151将文档更改为服务器配置
ZOOKEEPER-193更新java示例doc以使用最新的zookeeper进行编译
ZOOKEEPER-187缺少CreateMode api文档
ZOOKEEPER-186为forrest文档添加新的“releasenotes.xml”
ZOOKEEPER-190Reorg链接到文档和导航到文档到相关部分
ZOOKEEPER-189forrest build未经验证的xml输入文档
ZOOKEEPER-188检查所有服务器是否存在选举端口
ZOOKEEPER-185改进版FLETest
ZOOKEEPER-184测试：使用memcpy函数需要显式include derective
ZOOKEEPER-183数组下标位于od_completion，src / cli.c中的数组范围之上。
ZOOKEEPER-182zookeeper_init接受空的host-port字符串并返回指向zhandle_t的有效指针。
ZOOKEEPER-17zookeeper_init doc需要澄清
ZOOKEEPER-181一些Source Forge文档没有被移过：javaExample，zookeeperTutorial，zookeeperInternals
ZOOKEEPER-180伞文章讨论的新主题文档中需要占位符部分
ZOOKEEPER-179程序员指南“基本操作”部分缺少内容
ZOOKEEPER-178FLE测试。
ZOOKEEPER-159涵盖领导人选举的两个角落案例
ZOOKEEPER-156从旧维基页面更新程序员指南和acl详细信息
ZOOKEEPER-154概述doc中的可靠性图表需要上下文
ZOOKEEPER-157同行找不到现有的领导者
ZOOKEEPER-155改进概述doc的“zookeeper项目”部分
ZOOKEEPER-140QuorumCnxManager中的死锁
ZOOKEEPER-147这是大多数[tbd ...]清除的文档版本
ZOOKEEPER-150动物园管理员建造破碎
ZOOKEEPER-136同步导致仲裁的所有粉丝都挂起。
ZOOKEEPER-134findbugs清理
ZOOKEEPER-133哈德森测试间歇性地失败
ZOOKEEPER-144为观察者事件添加tostring支持，为事件类型/状态添加枚举
ZOOKEEPER-21改善zk ctor / watcher
ZOOKEEPER-142提供Javadoc，以确定可能存储在znode中的数据字节数组的最大大小
ZOOKEEPER-93为Zookeeper创建文档
ZOOKEEPER-117领导选举中的线索问题
ZOOKEEPER-137客户端观察者对象可能会丢失事件
ZOOKEEPER-131老领导人选举可以一次又一次地选出一位死去的领导人
ZOOKEEPER-130更新build.xml以支持apache发布过程
ZOOKEEPER-118在followerrequestprocessor.run中的findbugs标记的switch语句
ZOOKEEPER-115QuorumCnxManager中的潜在NPE
ZOOKEEPER-114清理zookeeper客户端中的丑陋事件消息
ZOOKEEPER-112src / java / main ZooKeeper.java中嵌入了测试代码。
ZOOKEEPER-39在读取操作中使用Watcher对象而不是布尔值。
ZOOKEEPER-97支持代码生成器中的可选输出目录。
ZOOKEEPER-101在Hudson上集成ZooKeeper和“违规”功能
ZOOKEEPER-105捕获Zookeeper异常并在stderr上打印。
ZOOKEEPER-42将领导者选举更改为快速tcp。
ZOOKEEPER-48auth_id现在在没有auth id存在时正确处理
ZOOKEEPER-44创建前缀为0的序列标志子项，以便按字典顺序对它们进行排序。
ZOOKEEPER-108修复仲裁上的同步操作重新排序。
ZOOKEEPER-25Zookeeper的Fuse模块。
ZOOKEEPER-58ClientCnxn.java上的竞争条件
ZOOKEEPER-56为build.xml添加三叶草支持。
ZOOKEEPER-75使用nabble.com注册ZooKeeper邮件列表
ZOOKEEPER-54在测试中删除睡眠。
ZOOKEEPER-55build.xml failes从SVN检索版本号，ant目标“dist”失败
ZOOKEEPER-89当ZK连接失败时调用WhenOwnerListener.whenNotOwner
ZOOKEEPER-90当ZK会话到期并且znode是领导者时调用WhenOwnerListener.whenNotOwner
ZOOKEEPER-82使ZooKeeperServer更加友好。
ZOOKEEPER-110构建脚本依赖于svnant，它与subversion 1.5工作副本不兼容
ZOOKEEPER-111显着清理现有测试。
ZOOKEEPER-122在黄麻的Utils.toCSVString中修复NPE。
ZOOKEEPER-123修复了为记录器指定的错误类。
ZOOKEEPER-2修复QuorumPeer和FastLeader选举中的同步问题。
ZOOKEEPER-125在FastLeaderElection中删除不需要的类声明。
ZOOKEEPER-61客户端/服务器测试用例中的地址。
ZOOKEEPER-75清理库目录
ZOOKEEPER-109通过静态分析找到NPE和资源问题的清理
ZOOKEEPER-76Commit 677109删除了cobertura库，但没有删除构建目标。
ZOOKEEPER-63客户关闭的竞争条件
ZOOKEEPER-70为ZooKeeper添加骨架forrest doc结构
ZOOKEEPER-79在wiki食谱页面上记录jacob的领导者选举
ZOOKEEPER-73将ZK wiki从SourceForge移动到Apache
ZOOKEEPER-72ZooKeeper ASF站点的初始创建/设置。
ZOOKEEPER-71确定要做什么重新使用ZooKeeper Changelog
ZOOKEEPER-68ZooKeeper.java中的parseACL无法解析ACL的元素，应该是lastIndexOf而不是IndexOf
ZOOKEEPER-130更新build.xml以支持apache发布过程。
ZOOKEEPER-131修复旧领导人选举可以一次又一次地选出一位死去的领导人。
ZOOKEEPER-137客户端观察者对象可能会丢失事件
ZOOKEEPER-117领导选举中的线索问题
ZOOKEEPER-128异步客户端操作的测试覆盖率需要改进
ZOOKEEPER-127在配置中断服务中使用非标准选举端口
ZOOKEEPER-53测试在solaris上失败了。
ZOOKEEPER-172FLE测试
ZOOKEEPER-41示例启动脚本
ZOOKEEPER-33更好的ACL管理
ZOOKEEPER-49SetACL不起作用
ZOOKEEPER-20删除节点时不会触发子监视
ZOOKEEPER-15在build.xml中更好地处理故障：test
ZOOKEEPER-11使用ArrayList代替List
ZOOKEEPER-45初始导入后重构SVN存储库
ZOOKEEPER-1来自Yahoo!的初始ZooKeeper代码贡献

 

转载来源：https://github.com/apache/zookeeper/blob/master/zookeeper-docs/src/main/resources/markdown/releasenotes.md 

星河_赵梓宇
关注
专栏目录
第10课：主流的分布式消息队列方案解读及比较
Jin_Kwok的博客
10-28 951
消息队列中间件是分布式系统中重要的组件，主要解决应用耦合、异步消息、流量削锋等问题。它可以实现高性能、高可用、可伸缩和最终一致性架构，是大型分布式系统不可缺少的中间件。 消息队列在电商系统、消息通讯、日志收集等应用中扮演着关键作用，以阿里为例，其研发的消息队列（RocketMQ）在历次天猫 “双十一” 活动中支撑了万亿级的数据洪峰，为大规模交易提供了有力保障。 作为提升应用性能的重要手段，分布式消...
dbeaver连接hive2.1.1依赖jar包
03-11
3. **其他依赖库**：Hive可能还依赖于其他库，比如`avro.jar`用于Avro数据格式，`zookeeper.jar`用于ZooKeeper服务，`slf4j-api.jar`和`slf4j-log4j12.jar`用于日志记录，以及其他可能的数据库驱动，如`mysql-...
zookeeper_3.0:利用zookeeper在死服务器上存活
06-09
zookeeper_3.0 //如果您有任何错误或发现，请随时告诉我。 利用zookeeper在死服务器上存活 启动Zookeeper 1.下载：到以下链接下载。 （下载稳定版，本报告由zookeeper.3.4.6提供） 2.下载后，我们应该配置它。 打开：/zookeeper3.4.6/conf/zoo.cfg 为了测试，我们只在我们的本地机器上运行它。 将以下内容复制并粘贴到此文件中。 （您也可以在找到教程 tickTime=2000 dataDir=/your path/where/you/want/to/store/data/in-memory/databse clientPort=2181 3.启动Zookeeper服务器。 在命令行（CMD）中，运行以下命令在自己的机器上启动zookeeper服务器。 /zookeeper3.4.6/bin/zkServer.sh
3.0 zookeeper的集群介绍、搭建、环境、安装
diaoli1340的博客
07-19 105
zookeeper是本身是一种分布式协调服务（英文意思动物园园长因为Hadoop就是一个动物园，storm、hadoop、kafkaka、hbaser都是基于zookeeper开发的） 原理：Zookeeper虽然在配置文件中并没有指定master和slave但是，zookeeper工作时，是有一个节点为leader，其他则为follower，Leader是通过内部的选举机制临时产生的...
3.0.0安装zookeeper
Simon的博客
04-02 213
安装zookeeper一、     新建zookeeper文件夹二、     上传tar包三、     解压tar -zxvf zookeeper-3.4.6.tar.gz四、     更改配置文件                进入zookeeper安装目录下的conf目录:                复制zoo.cfg文件:                修改zoo.cfg        ...
4.ZooKeeper 3.0.0发行说明及版本升级
sun
03-09 1517
升级到3.0.0时的迁移说明 你应该只需要阅读本节，如果你从旧版本的ZooKeeper升级到3.0.0版本，otw跳下来更改 此版本中的少量更改导致非向后兼容的Zookeeper客户端用户代码和服务器实例数据。以下说明提供有关如何将代码和日期从版本2.2.1迁移到版本3.0.0的详细信息。 注意：当向源库进行向后不兼容更改时，ZooKeeper会增加主版本号（major.minor.fi
zookeeper 3.4.10版本常用命令示例
最新发布
学亮编程手记
03-21 258
【代码】zookeeper 3.4.10版本常用命令示例。
PyPI 官网下载 | clldlucl-3.0.0b0.tar.gz
01-26
资源全名：clldlucl-3.0.0b0.tar.gz"进一步确认了这个文件的来源，并提供了完整的文件名，它是通过PyPI获取的，且是该库的一个预发行版（因为有`b0`，表示beta 0）。 标签中包含的关键词"zookeeper"、"分布式"、"云...
PyPI 官网下载 | girder-homepage-3.0.0rc2.dev86.tar.gz
01-27
通常，这样的预发行版本（Release Candidate）是给开发者测试和反馈用的，以便在正式发布前发现并解决潜在问题。 girder不仅支持本地部署，还与云原生（Cloud Native）理念相融合，这意味着它设计用于分布式环境，...
apache atlas2.1.0 整合CDH6.3.2编译安装包
07-01
这个压缩包是针对CDH（Cloudera Distribution Including Apache Hadoop）6.3.2 版本进行整合编译的，CDH是一个广泛使用的Hadoop生态系统的企业级发行版。 CDH 6.3.2 包含了Hadoop生态系统中的多个组件，如HDFS、...
Zookeeper简介
weixin_30877181的博客
03-07 141
1.概述 1.1什么是zookeeper 　　Zookeeper是一个开源的分布式的，为分布式应用提供协调服务的Apache项目。　　Zookeeper从设计模式角度来理解：是一个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据，然后接受观察者的注册，一旦这些数据的状态发生变化，Zookeeper就将负责通知已经在Zookeeper上注册的那些观察者做出相应的...
2.0升级3.0版本注意事项说明
范永强的专栏
02-19 910
随着3.0的发版本，原有使用2.0的客户会陆续升级到3.0上来，在此把一些安装部署和升级过程中的注意事项列举出来。 升级包括环境的升级和数据库的升级。环境的升级如果有另外的服务器，直接安装即可，如果是同一台服务器，卸载2.0，清空安装目录，安装3.0即可。安装完成后，我们可以说环境就升级上来了，接着就是升级管理中心和业务数据中心了。 管理中心的升级，在新安装的环境中，访问管理中心，自动
[0]Hadoop 1.0 -> Hadoop 2.0（主）-> Hadoop 3.0 发展简要
神是念着倒
05-13 2957
Hadoop 1.0 和Hadoop 2.0 区别
ZooKeeper设置ACL权限控制
专注技术交流、咨询
12-19 1万+
ZK的节点有5种操作权限： CREATE、READ、WRITE、DELETE、ADMIN 也就是 增、删、改、查、管理权限，这5种权限简写为crwda(即：每个单词的首字符缩写) 注：这5种权限中，delete是指对子节点的删除权限，其它4种权限指对自身节点的操作权限 身份的认证有4种方式： world：默认方式，相当于全世界都能访问 auth：代表已经认证通过的用户(cli中可以通
zookeeper 简介
xiaojie19871116的博客
06-01 4354
一直对zookeeper的应用和原理比较迷糊，今天看一篇文章，讲得很通透，分享如下：  场景一 有这样一个场景：系统中有大约100w的用户，每个用户平 均有3个邮箱账号，每隔5分钟，每个邮箱账需要收取100封邮件，最多3亿份邮件需要下载到服务器中(不含附件和正文)。用20台机器划分计算的压力，从 多个不同的网路出口进行访问外网，计算的压力得到缓解，那么每台机器的计算压力也不会很大了。
zookeeper各种版本下载地址
sql770275479的博客
10-10 7600
zookeeper各种版本下载地址： http://archive.apache.org/dist/zookeeper/
ZooKeeper下载安装（Windows版本）
热门推荐
IT生涯——知其然知其所以然
05-25 10万+
官网下载 进入Apache ZooKeeper官方网站进行下载，https://zookeeper.apache.org/releases.html 这里我们选择zookeeper-3.4.12版本进行下载 百度网盘下载 链接：https://pan.baidu.com/s/1HOEcfGpg7CqAm28cOhGzuA 密码：ap4n...
zookeeper服务搭建及简单使用
寂夜了无痕的博客
06-08 1万+
zookeeper 是什么    ZooKeeper是一个集中服务，用于维护配置信息，命名，提供分布式同步和提供组服务。所有这些类型的服务都以某种形式被分布式应用程序使用。每次他们实施时，都会有很多工作来解决不可避免的错误和竞争条件。由于实施这些服务的困难，最初的应用程序通常会吝啬，这使得它们在变化和难以管理的情况下变得脆弱。即使正确完成，这些服务的不同实现会导致部署应用程序时的管理复杂性。（摘录...
Zookeeper acl超级用户
金溪的博客
07-07 3431
总体来说，ZK的节点有5种操作权限： CREATE、READ、WRITE、DELETE、ADMIN也就是增、删、改、查、管理权限，这5种权限简写为crwda。 注： delete是指对子节点的删除权限，其它4种权限指对自身节点的操作权限。   Cli命令行下可这样测试： create /test 'test-data' getAcl /test 通过getAcl命令可以发现，刚创建的...
Zookeeper安装包及使用说明详解
资源摘要信息:"Zookeeper安装包和安装说明" 知识点一：Zookeeper简介 Zookeeper是一个开源的分布式协调服务，它为分布式应用提供一致性服务。Zookeeper的设计目标是将那些复杂且容易出错的分布式一致性服务封装起来...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值