![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Zookeeper
高达一号
这个作者很懒,什么都没留下…
展开
-
Zookeeper_Zookeeper客户端连接(含集群方式)
zookeeper 连接地址,zookeeper 的连接方式多种多样,这里展示3种连接方式1.命令行连接2.jar程序连接3.IDE 插件一、zkCli.sh / zookeeper-client 连接方式命令行连接zookeeper-client -server cdh-manager:2181,cdh-node1:2181,cdh-node2:2181连接后的信息[root@cdh-manager /]# zookeeper-client -serve...原创 2020-06-27 12:40:23 · 8347 阅读 · 0 评论 -
大数据_ 分布式一致 广播协议 Paxos, Zab , Raft 协议对比
其他参考:分布式事务与一致性算法Paxos & raft & zabhttps://blog.csdn.net/followmyinclinations/article/details/52870418今天我对 Paxos, Zab, Raft 一一做了细致的了解。趁着还比较熟悉的时间节点,对这三个协议的异同做一个对比。下面是这三个协议描述的链接地址:希望...原创 2019-03-18 22:12:48 · 1521 阅读 · 0 评论 -
大数据_Zookeeper_Raft 协议
在学习完 paxos , zab , 协议后,我们接下来对 比较火的 分布式一致性广播协议,Raft 协议了解一下。这篇文章讲解的非常好,我就没有自己再写一篇文章,直接摘录过来了。原文地址:https://www.sohu.com/a/198360462_7127630 - Raft协议和Paxos的因缘 读过Raft论文《In Search ...转载 2019-03-18 21:24:16 · 2079 阅读 · 0 评论 -
大数据_Zookeeper - Paxos 算法
Paxos 协议描述的场景: 在古希腊有一个Paxos 的小岛,岛上采用议会的形式来通过法令,议会中的议员通过信使进行消息的传递。值得注意的是,议员跟信使都是兼职的,他们随时有可能会离开议会厅,并且信使可能会重复的传递消息,也可能一去不复返。 因此,议会协议要保证在这种情况下,法令仍能够正确的产生,并且不会出现冲突。下面对 Paxos 算法进行描述:假设...原创 2019-03-18 19:31:42 · 433 阅读 · 0 评论 -
大数据_ 2PC , 3PC 协议详解
在大数据 / 分布式时代, 如何确保数据的一致性 已经成为了 一个不可避免的 讨论话题。下面我们对 2PC , 3PC , Paxos 协议进行一下了解。2PC 协议2PC , Two-Phase-Commit 的缩写,即两阶段提交, 两阶段提交协议被认为是一种一致性协议,用来保证分布式系统的一致性。阶段一 : 提交事务请求1.事务查询:...转载 2019-03-18 16:59:17 · 611 阅读 · 0 评论 -
Zookeeper_Zookeeper 的 ZAB 协议
参考文章:1.zookeeper中的ZAB协议理解https://blog.csdn.net/junchenbb0430/article/details/775839552.ZAB协议和Paxos算法http://blog.jobbole.com/109589/3.聊聊zookeeper的ZAB算法https://www.jianshu.com/p/400a44...原创 2019-03-13 20:57:56 · 408 阅读 · 0 评论 -
Zookeeper 本地 单实例 后台启动脚本
我们在日常启动 zookeeper 的时候,一般都通过命令直接启动。但是由于使用频率不高,一般将启动相关指令,放到脚本中。 启动脚本:my-bin/start_local_one.sh#!/bin/bashset -ueROOT_PATH=$(dirname $(dirname $(readlink -f $0)))#echo $ROOT_PATHcd...原创 2018-10-24 16:35:11 · 1413 阅读 · 0 评论 -
Zookeeper zookeeper 初始化还原
由于 kafka 的升级,zookeeper 残存了很多原有的消费者信息,需要进行初始化 还原 zookeeper。首先我们要清楚一点,zookeeper 服务停止后,是如何存储数据的。 zookeeper 在运行中会将数据加载在内存中,其不定期 会向磁盘存入快照。 在 zookeeper 重启后 ,会加载快照,从而完成数据的重新加载。 也就是说,...原创 2018-10-24 16:16:36 · 4888 阅读 · 0 评论 -
Zookeeper / Linux Shell zookeeper自动重启脚本
最近博主遇到了 zookeeper 自动死掉的问题, 这里 留下一个重启脚本, 作为备份#!/bin/bash#zk服务器问题修复脚本#zkServer服务所在路径zkDir="/usr/local/zookeeper/bin/"zkLog='zookeeper.out'#进入zkServer.sh所在的目录cd $zkDirflag=1#当$flag=0时转载 2017-01-10 11:22:59 · 2728 阅读 · 0 评论 -
Zookeeper_zookeeper日志清理
转载请用注明:@ni掌柜 nileader@gmail.com在使用zookeeper过程中,我们知道,会有dataDir和dataLogDir两个目录,分别用于snapshot和事务日志的输出(默认情况下只有dataDir目录,snapshot和事务日志都保存在这个目录中,关于这两个目录的详细说明,请看《ZooKeeper管理员指南》)。 正常运行过程中,ZK会不断地把快转载 2016-11-15 11:15:10 · 4831 阅读 · 0 评论 -
Zoookeeper_Java API操作zookeeper 通过zookeeper.jar
本文讲解下如何通过 zookeeper.jar 操作Zookeeper.并给出一个例子:例子通过zookeeper记录文件读取的偏移量,当程序重启后,从上一次的断点接着读取。Maven dependency org.apache.zookeeper zookeeper 3.4.6 封装的Java 操作类注意一点,Zook原创 2016-11-11 14:14:24 · 3316 阅读 · 0 评论 -
Zookeeper_zkCli 的使用 : 增删查改 与 配额quota
基于版本 zookeeper 3.4.5 版本比较老zkCli 是 zookeeper 原生的与 zk服务群连接的客户端的程序。1.如何使用zkCli,sh 连接server 与参数2.zkCli 下的增删查改指令 与 配额 quota1.如何使用zkCli,sh 连接server 与参数可选的参数:./zkCli.sh-timeou原创 2016-11-05 20:22:04 · 3533 阅读 · 0 评论 -
大数据_Zookeeper_ZooKeeper伪分布式集群安装及使用
From: http://blog.fens.me/hadoop-zookeeper-intro/查看 zk的目录结构 zkCli.sh -server-port 2181让Hadoop跑在云端系列文章,介绍了如何整合虚拟化和Hadoop,让Hadoop集群跑在VPS虚拟主机上,通过云向用户提供存储和计算的服务。现在硬件越来越便宜,一台非品牌服务器,2颗24核CPU...转载 2016-08-15 21:44:13 · 1443 阅读 · 0 评论