kafka+zookeeper群集

目录

部署jdk

一、zookeeper简介

二、部署zookeeper

Ⅰ、zookeeper下载安装

Ⅱ、zookeeper配置文件 

Ⅲ、zookeeper的开启 

三、kafka简介

Ⅰ、为什么需要消息队列

Ⅱ、kafka特性

四、部署kafka

Ⅰ、kafka的下载安装

Ⅱ、kafka配置文件

Ⅲ、kafka_HOME环境

Ⅳ、启动kafka

五、Kafka的命令行操作

Ⅰ、创建topic

Ⅱ、查看topic列表、信息

Ⅲ、删除topic

Ⅳ、修改分区数

Ⅴ、发布、消费消息

---

部署jdk

rpm -qa | grep java
#查看系统自带的openjdk
rpm -evh --nodeps ***
#进行删除
 
rpm -ivh jdk-8u201-linux-x64.rpm
#安装jdk1.8.0_201的rpm包
 
vim /etc/profile.d/java.sh
#配置环境变量
export JAVA_HOME=/usr/java/jdk1.8.0_201-amd64
export CLASSPATH=.:$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/dt.jar
export PATH=$JAVA_HOME/bin:$PATH
#1.输出定义java的工作目录
#2.输出指定java所需的类文件
#3.输出重新定义环境变量，$PATH一定要放在$JAVA_HOME的后面，让系统先读取到工作目录中的版本信息
 
source /etc/profile.d/java.sh
#读取profile
java -version
#查看jdk版本
java version "1.8.0_201"
Java(TM) SE Runtime Environment (build 1.8.0_201-b09)
Java HotSpot(TM) 64-Bit Server VM (build 25.201-b09, mixed mode)

一、zookeeper简介

ZooKeeper 是一种为分布式应用所设计的高可用、高性能且一致的开源协调服务， 它提供了一项基本服务：分布式锁服务。分布式应用可以基于它实现更高级的服 务，实现诸如同步服务、配置维护和集群管理或者命名的服务。 Zookeeper 服务自身组成一个集群，2n+1 个（奇数）服务允许 n 个失效，当集群内 一半以上机器可用，Zookeeper 就可用。

二、部署zookeeper

群集：

zk22：192.168.116.22

zk25：192.168.116.25

zk120：192.168.116.120

Ⅰ、zookeeper下载安装

Zookeeper下载地址：
https://www.apache.org/dyn/closer.lua/zookeeper/zookeeper-3.7.1/apache-zookeep er-3.7.1-bin.tar.gz

zookeeper解压安装（所有节点）

tar zxvf apache-zookeeper-3.5.7-bin.tar.gz -C/opt
mv /opt/apache-zookeeper-3.5.7-bin.tar.gz /opt/zookeeper
cd /opt/zookeeper
cp ./conf/zoo_sample.cfg ./conf/zoo.cfg

Ⅱ、zookeeper配置文件 

修改部分如下

#------省略部分内容------
#创建一个数据目录，在zoo.cfg中修改数据目录为创建的数据目录

dataDir=/opt/zookeeper/zkdata
clientPort=2181

#------省略部分内容------
#指定群集节点

server.1=zk22:2888:3888
server.2=zk25:2888:3888
server.3=zk120:2888:3888

 将配置文件分发给另两个节点

vim /etc/hosts

192.168.116.22    zk22 ma