Zookeeper
TomAndersen
新目标:喜欢上读书
展开
-
Kafka之命令行的基本操作
kafka版本:2.11-2.1.1原创 2020-03-15 08:00:04 · 785 阅读 · 0 评论 -
Hadoop中HA模式配置(HDFS HA&YARN HA)
1.前言Hadoop版本:2.7.7Zookeeper版本:3.4.14Java版本:1.8.0_221Hadoop HA模式分为HDFS HA(NameNode HA)和YARN HA(ResourceManager HA)两个部分在本次配置中同时配置了HDFS HA和YARN HA下的自动故障转移Automatic Failover,以及历史服务器JobHistoryServer...原创 2020-02-26 20:58:17 · 693 阅读 · 0 评论 -
Zookeeper使用ssh远程启动脚本失败的解决方案
前言本文主要记录一次解决问题的经历问题描述在编写zookeeper群起脚本时,想要基于ssh命令来启动集群中所有zookeeper服务器节点。但是在使用ssh远程执行远端脚本时,控制台输出显示远端脚本已经正常运行结束,远端zookeeper进程实际上却未能运行。使用的ssh命令如下:[tomandersen@hadoop101 bin]$ ssh hadoop102 "$ZOOKE...原创 2020-02-20 17:57:46 · 2736 阅读 · 2 评论 -
Zookeeper分布式安装配置过程
分布式Zookeeper安装配置过程前言集群主机:hadoop101、hadoop102、hadoop103操作系统:CentOS 7Zookeeper版本:3.4.14JDK版本:1.8.0_221所有配置操作都必须在同一用户下1. 下载Zookeeper在Zookeeper官网提供的镜像网站上下载合适版本,本次下载的版本是3.4.142. 安装Z...原创 2020-02-20 16:58:34 · 453 阅读 · 0 评论 -
Zookeeper中stat结构体参数介绍
stat结构体示例[zk: localhost:2181(CONNECTED) 1] stat /cZxid = 0x0ctime = Thu Jan 01 08:00:00 CST 1970mZxid = 0x0mtime = Thu Jan 01 08:00:00 CST 1970pZxid = 0x300000002cversion = 0dataVersion = 0ac...翻译 2020-02-20 11:45:29 · 832 阅读 · 0 评论 -
Zookeeper中日志文件种类
日志种类Zookeeper在运行期间主要输出三类文件:快照(snapshot)、事务日志(transaction log)、运行日志。其中snapshot存放于dataDir中,事务日志在未设置dataLogDir参数时默认与snapshot存放路径相同,运行日志zookeeper.out默认存放在启动脚本的当前路径下snapshot是zookeeper节点存储的数据的永久备份,而事务日志t...原创 2020-02-20 10:45:46 · 1082 阅读 · 0 评论 -
Zookeeper修改运行日志zookeeper.out输出路径
前言Zookeeper中运行日志 zookeeper.out 文件的输出路径默认为启动脚本的当前路径,导致Zookeeper集群启动失败时总是不记得输出日志在哪儿,不便于查找错误原因,因此很有必要设置固定路径来保存运行日志在本次实验之前已经将 dataDir 和 dataLogDir 分别设置为$ZOOKEEPER_HOME/zkData和$ZOOKEEPER_HOME/logs/trans...原创 2020-02-20 09:19:33 · 2914 阅读 · 0 评论