Kafka安装配置以及使用

最新推荐文章于 2024-09-08 00:09:00 发布
最新推荐文章于 2024-09-08 00:09:00 发布
阅读量369 收藏 2
点赞数
分类专栏： 大数据 文章标签： kafka
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_32400615/article/details/102509965
版权
本文详细介绍了如何安装配置Kafka 2.10版本，包括依赖环境、安装步骤、配置修改、启动与关闭过程，以及对topic的基本操作，如查看、创建和消费者管理。
摘要由CSDN通过智能技术生成

Kafka安装配置以及使用

本文所安装的Kafka为2.10版本，Zookeeper是3.4.14版本，安装目录为/usr/local/kafka/

  • 1.环境

    kafka依赖的环境有Java、zookeeper
    zookeeper可单独安装，也可以直接用kafka自带的

  • 2.安装Kafka
    下载Kafka

     wget http://labfile.oss.aliyuncs.com/courses/859/kafka_2.10-0.10.2.1.tgz

    解压

    tar -zxvf kafka_2.10-0.10.2.1.tgz

    进入到解压好的kafka目录

    cd /usr/local/kafka/kafka_2.10-0.10.2.1/config

    3.配置

    修改配置文件server.properties
    在这里插入图片描述
    在这里插入图片描述在这里插入图片描述
    broker.id=0
    port=9092 #端口号

最低0.47元/天 解锁文章
北途
关注
专栏目录
（较详细）Kafka 安装配置
m0_67447926的博客
09-13 1254
（较详细）Kafka 安装配置，提供详细步骤，详细代码，注意事项
如何安装配置kafka
笔者从事电信媒体开发多年，愿意将多年的开发经验分享给同行
01-06 1023
本文介绍了如何安装kafka，如何配置kafka，kafka集群启动、停止及kafka基本操作方法。
Kafka的安装配置以及使用
索JM以后是大牛的博客
10-14 248
一，安装好zookeeper，做好准备工 zookeeper安装目录：cd apps/zookeeper-3.4.6/ 启动zookeeper：sh zkmanager.sh start （已经配置好了） 二，安装Kafka 1，下载kafua安装 http://archive.apache.org/dist/kafka/ 2，上传到虚拟机安装解压 kafka 2.1.2-...
Kafka （快速）安装部署
最新发布
m0_62943934的博客
09-08 1859
进行下载，Scala 2.12 和 Scala 2.13 主要是使用Scala编译的版本不同，两者皆可。接下来我们还需要在每个 zookeeper 节点的数据目录下创建对应的服务id文件与上面配置的。针对每个节点修改主机名称，查看当前主机的ip地址并固定，添加子网掩码，网关，DNS1。Kafka一般情况下都是分布式架构的，单机节点的使用情况基本不存在——了解即可。当然，也可以只安装并配置一台zookeeper，然后将整个软件拷贝过去。环境变量，以及将$ZK_HOME/bin文件夹加入PATH环境变量中。
kafka安装配置 linux
测试
03-06 240
1、下载http://mirrors.shuosc.org/apache/zookeeper/zookeeper-3.4.10/zookeeper-3.4.10.tar.gz 下载http://mirror.bit.edu.cn/apache/kafka/1.1.0/kafka_2.12-1.1.0.tgz2、新建zookeeper和kafka文件夹目录，在zookeeper目录新建zkd...
kafka安装配置
qq_35709489的博客
09-01 212
1、在官网下载安装包 http://kafka.apache.org/downloads 选择合适的版本下载 2、将安装包上传至虚拟机中 3、解压:tar -zxvf kafka_XXX.tgz -C /选择安装的目录 4、进入kafka/config目录下，修改配置文件： vi server.properties broker.id=0 // broker的id host.name=slave3 // 监听的地址(最好改为当前机器的主机名) log.dirs=/data/kafka // 后续数据
Kafka的安装配置
piaoniu_1985的专栏
03-31 139
消息的两个类型：Topic主题，Queue队列。Kafka属于Topic主题类型，在大数据的系统中，Kafka的使用依赖与zookeeper的，所有要先保证系统中先启动zk。现在以Kafka的单机单broker的方式来做简单的介绍。 准备安装文件，解压后可以不配置环境变量 tar -zxvf kafka_2.9.2-0.8.1.1.tgz -C ~/training/ 核心配置文件 ...
CDH平台kafka配置文件以及相关操作
07-07
CDH大数据平台kafka配置文件以及相关操作
kafka安装配置教程完整版
10-26
**Kafka安装配置教程完整版** Kafka是一种分布式流处理平台，由Apache软件基金会开发，广泛应用于大数据实时处理、消息传递以及日志收集系统。它以其高吞吐量、低延迟和可扩展性而闻名。在本文中，我们将详细介绍...
KafKa安装配置
weixin_46408961的博客
03-31 582
Kafka单机模式配置，非集群 01.解压安装： (base) root@LAPTOP-P1LA53KS:/mnt/e# tar zxvf kafka_2.11-2.4.0.tgz ^C (base) root@LAPTOP-P1LA53KS:/mnt/e# pwd /mnt/e (base) root@LAPTOP-P1LA53KS:/mnt/e# ls '$RECYCLE.BIN' Scala-2.11.0 conda-env
kafka的安装配置
qq_45232054的博客
06-23 139
kafka的安装配置 kafka的安装配置和案列—马 kafka的运行机制------马
Kafka安装配置
xiaoxy97的博客
07-09 265
1、进入kafka官网，下载kafka最新版本。 在Centos 7命令行下载： [root@172 software]# wget http://mirrors.tuna.tsinghua.edu.cn/apache/kafka/2.3.0/kafka_2.12-2.3.0.tgz 2、解压下载的kafka压缩包。 [root@172 software]# tar ...
kafka安装及配置
Qynwang的博客
05-10 3228
如果想要搭建集群的话，需要对于其他的虚拟机节点也按照上述方法执行安装，只是其中配置文件里的 broker.id=0 的值需要修改一下，每个节点必须保证不一样。上传到 linux 下的 /home/software/ 目录下，然后解压 kafka_2.13-3.2.1.tgz 包到/usr/local/如果提示权限不够，可以使用 chmod kafka-manager 修改权限。以配置文件的方式启动，后面的 & 表示后台启动。我这里下载的是 3.2.1 版本。
Kafka的安装与配置
热门推荐
xiaozhang的博客
10-06 1万+
设置环境变量ZOO_LOG_DIR，指定Zookeeper保存日志的位置；2.1、上传zookeeper-3.4.14.tar.gz到服务器。ZOOKEEPER_PREFIX指向Zookeeper的解压目录；3.8、此时Kafka是前台模式启动，要停止，使用Ctrl+C。# 复制zoo_sample.cfg命名为zoo.cfg。.apache.org/downloads下载。3.9、 验证kafka是否可以正常使用。1.3、查看zookeeper的启动信息。
kafka安装与配置
MyHelloWord_的博客
03-07 331
kafka安装与配置
kafka安装使用配置1.1
JIMC7788的博客
07-25 294
官方文档 rz上传到/usr/local/下 解压 tar xzvf 文件 改名 mv 文件 名字 环境变量 vi /etc/profile export KAFKA_HOME=/usr/local/kafka 生成环境变量 source /etc/profile 启动zkServer.sh start cd kafka/ cd config/...
kafka安装配置(超详细，傻瓜式安装)_kafka 安装配置(1)
m0_74932057的博客
04-17 1827
修改bigdata2和bigdata3中的zookeeper下的data中myid的值分别改为3和4。使用kafka-server-start.sh --version查看kafka的版本内容。进入kafka的config中修改server.properties文件。修改zoo_sample.cfg名字改为zoo.cfg。修改名称使环境变量里的和module下的一致。然后在进入zookeeper的conf下。#节点id，不同的节点用不同的数字表示。配置好kafka的环境变量。启动zookeeper。
kafka安装配置及使用
行东的bug博客笔记
04-17 1464
Kafka 是一个分布式流处理平台和消息队列系统，最初由 LinkedIn 公司开发并开源。它设计用于htt处理大规模的实时数据流，并具有高可扩展性、高吞吐量和持久性等特性。以下是 Kafka 的一些主要特点和用途：分布式架构：Kafka 是一个分布式系统，可以运行在多个服务器上组成的集群中。这个集群可以被扩展到数百台服务器上，以处理大量的数据和客户端。发布-订阅模型：Kafka 使用发布-订阅模型来处理消息。消息生产者将消息发布到一个或多个主题（Topics）中，而消息消费者则通过订阅这些主题来接收消息。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值