Kafka学习笔记【二】-安装

kafka的安装如下：
一、准备环境
1) 三台服务器
server1:192.168.3.9（L-AP-3-9）
server2:192.168.3.10（L-AP-3-10）
server3:192.168.3.18（L-AP-3-18）
2）下载
[url="http://mirror.bit.edu.cn/apache/kafka/1.1.0/kafka_2.11-1.1.0.tgz"]kafka_2.11-1.1.0.tgz[/url]
3）解压
cd /usr/local
tar -zxvf kafka_2.11-1.1.0.tgz
二、安装自带的zookeeper集群
1）编辑配置文件
vim /usr/local/kafka_2.11-1.1.0/config/zookeeper.properties

dataDir=/usr/local/zookeeper
dataLogDir=/usr/local/kafka_2.11-1.1.0/log/zookeeper
# the port at which the clients will connect
clientPort=2181
# disable the per-ip limit on the number of connections since this is a non-production config
maxClientCnxns=100
tickTime=2000
initLimit=10
syncLimit=5

server.1=L-AP-3-9:2888:3888
server.2=L-AP-3-10:2888:3888
server.3=L-AP-3-18:2888:3888

2）创建工作目录
mkdir /usr/local/zookeeper
cd zookeeper
#三台机器分别是1，2，3
vim myid

1

3）创建日志目录
mkdir -p /usr/local/kafka_2.11-1.1.0/log/zookeeper

#三台机器做相应的安装和配置
4）启动zookeeper集群
cd /usr/local/kafka_2.11-1.1.0
./bin/zookeeper-server-start.sh config/zookeeper.properties &

三、安装kafka集群
1）编辑配置文件
vim /usr/local/kafka_2.11-1.1.0/config/server.properties

#brokerId 分别为0，1，2
broker.id=0
#listeners 分别为各自的ip
listeners=PLAINTEXT://192.168.3.9:9092
log.dirs=/usr/local/kafka_2.11-1.1.0/log/kafka
num.partitions=3
offsets.topic.replication.factor=3
zookeeper.connect=192.168.3.9:2181,192.168.3.10:2181,192.168.3.18:2181
#其他都使用默认值

2）创建日志目录
mkdir -p /usr/local/kafka_2.11-1.1.0/log/kafka

#三台机器做相应的安装和配置
3）启动kafka集群
cd /usr/local/kafka_2.11-1.1.0
./bin/kafka-server-start.sh -daemon config/server.properties &

4)关闭kafka
./bin/kafka-server-stop.sh
需要修改其中的进程关键字
PIDS=$(ps ax | grep -i '[b]kafkaServer[/b]' | grep java | grep -v grep | awk '{print $1}')