kfk安装

一：kafka简介：
Kafka 被称为下一代分布式消息系统，是非营利性组织ASF(Apache Software Foundation，简称为ASF)基金会中的一个开源项目，比如HTTP Server、Hadoop、ActiveMQ、Tomcat等开源软件都属于Apache基金会的开源软件，类似的消息系统还有RbbitMQ、ActiveMQ、ZeroMQ，最主要的优势是其具备分布式功能、并且结合zookeeper可以实现动态扩容。
http://www.infoq.com/cn/articles/apache-kafka

安装环境：
三台服务器：
IP分别是：192.168.56.11 192.168.56.12 192.168.56.13
三台服务器分别配置hosts文件：

cat /etc/hosts

127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
::1 localhost localhost.localdomain localhost6 localhost6.localdomain6
192.168.56.11 linux-host1.exmaple.com
192.168.56.12 linux-host2.exmaple.com
192.168.56.13 linux-host3.exmaple.com

1.1：下载安装并验证zookeeper：
1.1.1：kafka下载地址：
http://kafka.apache.org/downloads.html

1.1.2：zookeeper 下载地址：
http://zookeeper.apache.org/releases.html

1.1.3：安装zookeeper：
zookeeper集群特性：整个集群种只要有超过集群数量一半的zookeeper工作只正常的，那么整个集群对外就是可用的，假如有2台服务器做了一个zookeeper集群，只要有任何一台故障或宕机，那么这个zookeeper集群就不可用了，因为剩下的一台没有超过集群一半的数量，但是假如有三台zookeeper组成一个集群，那么损坏一台就还剩两台，大于3台的一半，所以损坏一台还是可以正常运行的，但是再损坏一台就只剩一台集群就不可用了。那么要是4台组成一个zookeeper集群，损坏一台集群肯定是正常的，那么损坏两台就还剩两台，那么2台不大于集群数量的一半，所以3台的zookeeper集群和4台的zookeeper集群损坏两台的结果都是集群不可用，一次类推5台和6台以及7台和8台都是同理，所以这也就是为什么集群一般都是奇数的原因。

下载后的安装文件上传到各服务器的/usr/local/src目录然后分别执行以下操作。
1.1.3.1：Serer1 配置：
[root@linux-host1 ~]# cd /usr/local/src/
[root@linux-host1 src]# yum install jdk-8u151-linux-x64.tar.gz -y
[root@linux-host1 src]# tar xvf zookeeper-3.4.11.tar.gz
[root@linux-host1 src]# ln -sv /usr/local/src/zookeeper-3.4.11 /usr/local/zookeeper
[root@linux-host1 src]# mkdir /usr/local/zookeeper/data
[root@linux-host1 src]# cp /usr/local/zookeeper/conf/zoo_sample.cfg /usr/local/zookeeper/conf/zoo.cfg
[root@linux-host1 src]# vim /usr/local/zookeeper/conf/zoo.cfg
[root@linux-host1 src]# grep “¹” /usr/local/zookeeper/conf/zoo.cfg
tickTime=2000 #服务器之间或客户端与服务器之间的单次心跳检测时间间隔，单位为毫秒
initLimit=10 #集群中leader服务器与follower服务器第一次连接最多次数
syncLimit=5 # leader 与 follower 之间发送和应答时间，如果该follower 在设置的时间内不能与leader 进行通信，那么此 follower 将被视为不可用。
clientPort=2181 #客户端连接 Zookeeper 服务器的端口，Zookeeper 会监听这个端口，接受客户端的访问请求
dataDir