1.安装Zookeeper
百度cdh5,获取下载链接地址,wget命令下载Zookeeper;
解压安装,tar -zxvf
2.配置Zookeeper到系统的环境变量
vi ~/.bash_profile
export ZK_HOME=/home/bigdata/app/zookeeper-3.4.5-cdh5.7.0
export PATH=$ZK_HOME/bin:$PATH
source ~/.bash_profile 使之生效
3.配置Zookeeper
拷贝Zookeeper目录下conf中的zoo_sample.cfg,重命名为zoo.cfg,打开;
dataDir=/tmp/zookeeper,表示数据存储路径,该路径下每次启动都会重置,所以更改这个目录到自己指定的目录
4.启动Zookeeper
Zookeeper下的bin目录,启动./zkServer.sh start
jps查看进程
说明启动成功
Zookeeper部署好,才能进行Kafka的部署
5.下载安装kafka
kafka是apache的顶级项目,官网地址为kafka.apache.org,左下角download
选择下载版本,这里我选择0.9版本。复制下载链接,wget 下载
tar -zxvf解压
6.配置kafka的系统环境变量
同上
7.配置kafka
打开$KAFKA_HOME/config/server.properties
broker.id 整型且唯一
listeners 监听的端口
host.name hostname
log.dirs 日志存放地址
zookeeper.connect zookeeper的地址
8.启动kafka
kafka-server-start.sh $KAFKA_HOME/config/server.properties
jps查看kafka进程,
启动成功