张小丑

神未曾应允:天色常蓝,人生的路途,花香常伴~

大数据之:kafka安装详解
0. Kafka源码包下载
http://mirror.bit.edu.cn/apache/kafka/

1. 集群环境
Master 172.16.11.97
Slave1 172.16.11.98
Slave2 172.16.11.99

2. 下载软件包
#Master
wget http://mirror.bit.edu.cn/apache/kafka/0.10.2.1/kafka_2.11-0.10.2.1.tgz
tar zxvf kafka_2.11-0.10.2.1.tgz

3. 修改Kafka配置文件
#Master
cd kafka_2.11-0.10.2.1/conf
vim server.propertie
log.dirs=/tmp/kafka-logs
zookeeper.connect=master:2181,slave1:2181,slave2:2181

4. 增加环境变量
#Master、Slave1、Slave2
vim ~/.bashrc
export KAFKA_HOME=/usr/local/src/kafka_2.11-0.10.2.1
export PATH=$KAFKA_HOME/bin:$PATH
#刷新环境变量
source ~/.bashrc

5. 拷贝软件包
scp -r /usr/local/src/kafka_2.11-0.10.2.1 root@slave1:/usr/local/src/kafka_2.11-0.10.2.1
scp -r /usr/local/src/kafka_2.11-0.10.2.1 root@slave2:/usr/local/src/kafka_2.11-0.10.2.1

6. 修改Kafka配置文件
#Master
vim config/server.propertie
broker.id=0
#Slave1
vim config/server.propertie
broker.id=1
#Slave2
vim config/server.propertie
broker.id=2

7. 启动Kafka-Zookeeper集群
#如果启动了Zookeeper集群则跳过此步骤
vim /usr/local/src/kafka_2.11-0.10.2.1/bin/start-kafka-zookeeper.sh
/usr/local/src/kafka_2.11-0.10.2.1/bin/zookeeper-server-start.sh /usr/local/src/kafka_2.11-0.10.2.1/config/server.properties
chmod +x /usr/local/src/kafka_2.11-0.10.2.1/bin/start-kafka-zookeeper.sh
start-kafka-zookeeper.sh

8.启动Kafka集群
#Master、Slave1、Slave2
vim /usr/local/src/kafka_2.11-0.10.2.1/bin/start-kafka.sh
/usr/local/src/kafka_2.11-0.10.2.1/bin/kafka-server-start.sh /usr/local/src/kafka_2.11-0.10.2.1/config/server.properties
chmod +x /usr/local/src/kafka_2.11-0.10.2.1/bin/start-kafka.sh
start-kafka-zookeeper.sh

9. 进程状态
jps
#Master
#Slave1
#Slave2

10. 关闭集群
kafka-server-stop.sh
阅读更多
版权声明:如果有天小丑哭了,你也会不会觉得他是在搞笑?——张小丑 https://blog.csdn.net/knidly/article/details/80348853
想对作者说点什么? 我来说一句

Kafka视频教程

2018年05月13日 64B 下载

没有更多推荐了,返回首页

不良信息举报

大数据之:kafka安装详解

最多只允许输入30个字

加入CSDN,享受更精准的内容推荐,与500万程序员共同成长!
关闭
关闭