kafka 集群标准配置

最新推荐文章于 2024-09-14 11:11:02 发布
最新推荐文章于 2024-09-14 11:11:02 发布
阅读量972 收藏
点赞数
分类专栏： 大数据 队列 文章标签： kafka
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zb313982521/article/details/80587078
版权

./kafka-topics.sh --create --zookeeper 192.168.22.110:2181, 192.168.22.111:2181, 192.168.22.112:2181 --replication-factor 2 --partitions 2 --topic idoall_testTopic

./kafka-topics.sh --list --zookeeper localhost:2181

 ./kafka-server-start.sh -daemon ../config/server.properties


./kafka-console-producer.sh --broker-list 192.168.22.110:9092 --topic test


./kafka-console-consumer.sh --bootstrap-server 192.168.22.111:9092 --topic test --from-beginning
 

./kafka-console-producer.sh --broker-list 192.168.22.110:9092 --topic test

./kafka-console-consumer.sh --bootstrap-server 192.168.22.112:9092 --topic idoall_testTopic --from-beginning

 

 

 

 

zb313982521
关注
专栏目录
kafka集群的部署及kafka监控工具
qwerty1372431588的博客
07-30 1372
kafka1.kafka介绍2. kafka学习记录(术语)3. kafka集群部署(直接部署在了一台机器上)3.1 安装多节点zookeeper集群3.2 配置kafka集群3.3 启动集群4. 验证部署4.1 测试topic的创建和删除4.1.1 创建topic--->test4.1.2 查看该topic的具体情况4.1.3 删除topic4.2 测试消息的生产与发送4.2.1 创建生产者4.2.2 创建消费者4.2.3 生产者吞吐量测试4.2.4 消费者吞吐量测试5. kafka监控工具Kafk
kafka_2.13-2.5.1及安装方法
10-27
kafka_2.13-2.5.1及安装方法
linux启动kafka
qq_39665334的博客
10-06 393
1. 先启动zookeeper bin/zookeeper-server-start.sh -daemon config/zookeeper.properties 2.启动kafka服务器 bin/kafka-server-start.sh config/server
【kafka-02】kafka集群搭建
最新发布
zhenghuishengq的博客
09-14 1462
kafka集群搭建
kafka在linux启动
weixin_38822255的博客
12-08 1337
如果重启没有自动启动的话 ，就老老实实地敲命令， ps -ef | grep zook | grep -v grep | awk '{print $2}' | xargs kill -9 ps -ef | grep kafka | grep -v grep | awk '{print $2}' | xargs kill -9 检查关闭成功（双0）： ps -ef | grep zook | grep -v grep | wc -l ps -ef | grep kafka | grep -v grep |
Linux——kafka常用命令
前方一片光明
09-18 2415
kafka常用命令
Linux kafka配置和启动
山人自有妙计
03-07 786
注意一般kafka异常报错 could not be established 就是配置文件配错导致的。replication-factor 每个分区副本数。retention-hours 消息保留时长（小时）partitions 指定分区数。topic 主题名称。
Kafka详解(包括kafka集群搭建)
热门推荐
wudidahuanggua的博客
09-29 6万+
对kafka细致的解析，从理论到集群搭建实战
kafka集群配置
qq_3316359388的博客
12-17 371
Broker 端参数 首先 Broker 是需要配置存储信息的，即 Broker 使用哪些磁盘。那么针对存储信息的重要参数有以下这么几个： 1.log.dirs：这是非常重要的参数，指定了 Broker 需要使用的若干个文件目录路径。要知道这个参数是没有默认值的，这说明什么？这说明它必须由你亲自指定。 2.log.dir：注意这是 dir，结尾没有 s，说明它只能表示单个路径，它是补充上一个参数用的。 这两个参数应该怎么设置呢？很简单，你只要设置log.dirs，即第一个参数就好了，不要设置log.dir。
Kafka集群多用户访问权限分治和消息共享配置指导
企业实战系列集 ●●● https://ximenjianxue.blog.csdn.net
04-24 2973
这明显在生产环境，这种认证方式时不符合实际业务场景的。allow.everyone.if.no.acl.found=true #false的话就只能超级用户才能访问资源，true的话其他也可以，如果用户读写一个 Topic，但是没有配置 ACL 权限，客户端会报认证失败错误。现场业务由于多厂商集成，共享数据需要，需对接当前kafka集群，为做到类似租户隔离的功能，需要开启kafka的权限控制和动态用户管理功能，实现不同厂商访问被授权的合法资源，消费者账号只能消费数据，生产者账号只能生产数据。
Kafka集群参数配置(上)
xingshangyy的博客
10-21 1233
Broker 端参数 目前 Kafka Broker 提供了近 200 个参数，这其中绝大部分参数都不用你亲自过问。当谈及这些参数的用法时，网上的文章多是罗列出一些常见的参数然后一个一个地给出它们的定义，事实上我以前写文章时也是这么做的。不过今天我打算换个方法，按照大的用途类别一组一组地介绍它们，希望可以更有针对性，也更方便你记忆。 首先 Broker 是需要配置存储信息的，即 Broker 使用哪些磁盘。那么针对存储信息的重要参数有以下这么几个： **log.dirs：**这是非常重要的参数，指定了 Br
linux中如何操作kafka
10-07
kafka常用操作命令,启动,新增topic,删除topic,查看topic列表
最新版windows kafka_2.13-2.5.0.zip
04-18
最新版windows kafka_2.13-2.5.0.zip
kafka_2.13-2.4.0.tgz
03-05
kafka 最新 linux
Linux kafka常用命令
zhaorongxi的博客
12-28 5541
Linux常用操作kafka命令大全
windows安装kafka_2.13-2.8.1教程
qq_35160479的博客
06-16 895
windows安装kafka_2.13-2.8.1教程
linux版kafka常用命令
YiRan_Zhao的博客
10-19 491
kafka
Linux Kafka安装与启动
松鼠教授的博客
03-15 1万+
kafka安装与配置 官网下载安装解压缩：http://kafka.apache.org/downloads 下载解压启动 启动命令：bin/kafka-server-start.sh -daemon config/server.properties server.properties配置中需要关注以下几个参数： broker.id=0 表示broker的编号，如果集群中有多个broker，则每个broker的编号需要设置 的不同 listeners=PLAINTEXT://:9092 brokd
单机版本 kafka-2.13版本和EFAK-3.0.1安装
weixin_42323655的博客
12-02 1450
单机版本 kafka-2.13版本和EFAK-3.0.1安装
翼支付内部：Kafka集群管理实践与维护操作指南
该文档详细介绍了翼支付内部在实际生产环境中对Kafka集群的管理和维护策略，旨在提升...通过这个文档，翼支付的内部团队可以遵循一套标准化的操作流程和规则，有效管理Kafka集群，提升整体的运维水平和系统的可靠性。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值