Kafka安装操作文档（详细）

最新推荐文章于 2024-09-28 22:23:37 发布

IT有个圈儿

最新推荐文章于 2024-09-28 22:23:37 发布

阅读量1.3k

点赞数

分类专栏：大数据文章标签： Kafka 大数据

本文链接：https://blog.csdn.net/bingxiecs/article/details/79753153

版权

本文详述了Kafka的安装过程，并介绍了Kafka中leader、replicas和isr的概念，深入理解这些核心概念对于Kafka的使用至关重要。

摘要由CSDN通过智能技术生成

 
 https://kafka.apache.org/documentation.html#quickstart  官方文档 

 
 安装配置 

 
 【机器3台： 
 cdh-yhte01-03 
 】 

  1、下载kafka_2.9.2-0.8.1.1.tgz（http://mirrors.cnnic.cn/apache/kafka/0.8.1.1/kafka_2.9.2-0.8.1.1.tgz） 

  2、 解压 tar -zxvf kafka_2.9.2-0.8.1.1.tgz 

  3、 确认zookeeper已启动 

          [root@cdh-yhte01 ~]# ps -ef | grep zookeeper  

  4、修改配置文件 config/server.properties 

    host.name=cdh-yhte01 

              log.dirs=/usr/local/kafka/kafka-logs 

              zookeeper.connect=cdh-yhte01:2181,cdh-yhte02:2181,cdh-yhte03:2181 

 
 不配置host.name的话，发送信息时会出现以下错误： 

  kafka.common.FailedToSendMessageException: Failed to send messages after 3 tries. 

          at kafka.producer.async.DefaultEventHandler.handle(DefaultEventHandler.scala:90) 

          at kafka.producer.async.ProducerSendThread.tryToHandle(ProducerSendThread.scala:104) 

          at kafka.producer.async.ProducerSendThread$$anonfun$processEvents$3.apply(ProducerSendThread.scala:87) 

          at kafka.producer.async.ProducerSendThread$$anonfun$processEvents$3.apply(ProducerSendThread.scala:67) 

          at scala.collection.immutable.Stream.foreach(Stream.scala:526) 

          at kafka.producer.async.ProducerSendThread.processEvents(ProducerSendThread.scala:66) 

          at kafka.producer.async.ProducerSendThread.run(ProducerSendThread.scala:44) 

  5、启动kafka 

              bin/kafka-server-start.sh config/server.properties & 

  6、部署到其他机器 

  [ 
 root@cdh-yhte01

关注

专栏目录