kafka 伪分布式环境搭建

基础组件安装

记录本地kafka伪集群安装。

1.0 java环境

1.oracle 官网下载最新jdk【本次8u211版本】；
2. linux 安装jdk
. 目录 /usr/java
. 解压: tar -zxvf jdk-8u211-linux-x64.tar.gz
. 配置环境变量：
. vim /etc/profile
. export JAVA_HOME=/usr/java/jdk1.8.0_211
. export JRE_HOME=$JAVA_HOME/jre
. export PATH=$PATH:$JRE_HOME/bin:$JAVA_HOME/bin
. source /etc/profile
3. 测试安装 java -version

2.0 zookeeper安装

1: 下载zk.
. http://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.4.14/
2: 安装zk.
. 指定安装目录 /opt/zookeeper
. 解压 tar -zxvf zookeeper-3.4.14.tar.gz > install.log.
. 简单配置: cp ./zookeeper-3.4.14/conf/zoo_sample.cfg ./zookeeper-3.4.14/conf/z
oo.cfg

3：启动zk
zookeeper-3.4.14/bin/zkServer.sh start

验证

安装成功了。

3.0安装单节点kafka

1 下载kafka http://mirror.bit.edu.cn/apache/kafka/2.2.0/kafka_2.12-2.2.0.tgz
2 安装kafka
指定目录 /opt/kafka
解压压缩包 tar -zxvf kafka_2.12-2.2.0.tgz > install.log
修改配置文件
vi kafka_2.12-2.2.0/config/server.properties
log.dirs=/opt/kafka/data-logs
3 启动服务
kafka_2.12-2.2.0/bin/kafka-server-start.sh kafka_2.12-2.2.0/config/server.properties
kafka_2.12-2.2.0/bin/kafka-server-start.sh -daemon kafka_2.12-2.2.0/config/server.properties
【记得将将hostname 加入/etc/hosts 此处有坑】

4测试
创建主题 topic
bin/kafka-topics.sh --create --zookeeper localhost:2181 --topic test --partitions 1 --replication-factor 1
查看主题
bin/kafka-topics.sh --describe --zookeeper localhost:2181 --topic test
发送消息
bin/kafka-console-producer.sh --borker-list localhost:9092 --topic test
接收消息
bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning

start record 。