Kafka 2.11-0.11.0.2 伪分布式 基于Ubuntu16.0.4 配置记录

原创 2018年04月16日 10:03:59

安装Zookpeer

sudo apt-get install zookeeperd

然后在终端中启动监听即可

netstat -ant | grep :2181

终端输出如下表示启动成功

tcp6       0      0 :::2181                 :::*                    LISTEN

下载Kafka

通过wget或者浏览器方式下载kafka以后,将其解压到/usr/local目录即可

sudo tar -xvf kafka_2.11-0.11.0.2.tgz -C /usr/local/

启动Kafka

sudo /usr/local/kafka_2.11-0.11.0.2/bin/kafka-server-start.sh /usr/local/kafka_2.11-0.11.0.2/config/server.properties 

启动成功以后,我们新开一个终端,测试kafka server

测试Kafka server

  • 生成主题
 sudo /usr/local/kafka_2.11-0.11.0.2/bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic testing

终端会提示

Created topic “testing”.

  • 通过Zookpeer询问kafka可用的主题
 sudo /usr/local/kafka_2.11-0.11.0.2/bin/kafka-topics.sh --list --zookeeper localhost:2181

终端会列举目前可用的主题

testing

  • 通过kafka生产信息,输入How are you? I am fine.等一些信息即可
sudo /usr/local/kafka_2.11-0.11.0.2/bin/kafka-console-producer.sh --broker-list localhost:9092 --topic testing
>How are you?
>I am fine.
>
  • 接下来开启一个新终端,再通过kafka消费信息
sudo /usr/local/kafka_2.11-0.11.0.2/bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic testing --from-beginning
  • 终端会提示上面生产出来的消息
How are you?
I am fine.

表示上述kafka配置完成,如下所示:

此处输入图片的描述

附注

参考文档 Install and Configure Apache Kafka on Ubuntu 16.04

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/Linux1s1s/article/details/79956884

Kafka单机伪分布式安装

前提条件:安装好zookeeper,见下文 http://blog.csdn.net/jameshadoop/article/details/49621709 环境: centos 6.5...
  • fz2543122681
  • fz2543122681
  • 2015-11-05 16:39:39
  • 2781

Zookpeer 3.4.10 伪分布式 基于Ubuntu16.0.4 配置记录

此文详细记录了 Zookpeer 3.4.10 基于Ubuntu 16.0.4 安装的详细过程,以方便后续查阅. 下载Zookpeer 通过前面给出的下载地址,自行下载,然后解压到制定目...
  • Linux1s1s
  • Linux1s1s
  • 2018-04-16 10:03:24
  • 9

记一次kafka单机伪分布部署

1.下载kafka的tgz文件,这里我下载的是kafka_2.12-0.11.0.2.tgz2.上传到服务器并且解压出来,我是解压在/usr/local目录下面,并且我改成了kafka_2.12名字3...
  • u013329535
  • u013329535
  • 2018-02-25 12:54:57
  • 104

ubuntu16.04(64位)+Hadoop2.7.3伪分布式环境下部署Spark

由于Hadoop的伪分布式环境已经搭建好,下面就是部署Spark 1.去官网下载Spark。     我是下载的最新版spark-2.1.0-bin-hadoop2.7.tgz。 2.解...
  • he582754810
  • he582754810
  • 2017-01-09 11:34:28
  • 284

kafka_2.11 安装配置 (详细图文)

准备工作先从官网上下载好该版本的安装包,并上传到集群中任意一台主机(我上传到了master上)...
  • M_SIGNALs
  • M_SIGNALs
  • 2016-11-17 16:07:11
  • 1752

Ubuntu16.0.4 伪分布式配置 Hadoop 2.6.5

此文记录了配置Hadoop2.6.5的详细过程,其间参考网络上的相关文章,这里先申明. JDK配置 对于java开发,JDK配置是第一步,相关文章也很多,这里贴出来~/.bashrc的配置文件...
  • Linux1s1s
  • Linux1s1s
  • 2018-04-16 09:59:40
  • 1

kafka+java 伪分布式 之二

对上一篇 kafka+java 伪分布式有生产者和消费者 ,接下来对High Level Consumer做处理 如下: 先看代码 :  package com.xiefg.kafka; ...
  • u010011737
  • u010011737
  • 2017-02-05 16:31:39
  • 693

Flume+Kafka+Strom基于伪分布式环境的结合使用

--------------------------------------- 博文作者:迦壹 博客地址:Flume+Kafka+Strom基于伪分布式环境的结合使用 转载声明:可以转载, 但...
  • xiaomin1991222
  • xiaomin1991222
  • 2016-03-10 16:05:00
  • 329

Centos7 + Hadoop 3.0 伪分布式环境安装部署

本文用来记录自己学习hadoop生态而作,并给大家提供参考,如有问题,请见谅。...
  • u011616484
  • u011616484
  • 2016-10-18 13:36:00
  • 1471

kafka伪分布式安装

必须先安装zookeeper,参考: 解压文件至 /usr/local/tanlei/kafkacluster/ tar -zxvf kafka_2.11-0.9.0.1.tgz 这里只创建了...
  • u012572955
  • u012572955
  • 2017-12-27 15:06:20
  • 77
收藏助手
不良信息举报
您举报文章:Kafka 2.11-0.11.0.2 伪分布式 基于Ubuntu16.0.4 配置记录
举报原因:
原因补充:

(最多只允许输入30个字)