花名:白起

科技改变世界,技术改变人生。

kafka如何彻底删除topic

网上都说用kafka-run-class.shkafka.admin.DeleteTopicCommand 命令删除topic,但是并没有成功,用kafka-topics.sh命令查看依然可以查看到topic,应该怎样才能彻底删除topic? 一、**kafka 0.8.1.1以及之前版本** ...

2017-05-31 17:06:10

阅读数:829

评论数:0

kafka集群下线broker节点实践方法

kafka集群 broker 0(10.11.32.76    hadooptest76.bj) broker 1(10.11.32.77    hadooptest77.bj) broker 2(10.11.32.81    hadooptest81.bj) 操作任务:下线broker 2节点...

2017-04-27 16:20:48

阅读数:3716

评论数:0

kafka处理超大消息的方案

Kafka设计的初衷是迅速处理短小的消息,一般10K大小的消息吞吐性能最好(可参见LinkedIn的kafka性能测试)。但有时候,我们需要处理更大的消息,比如XML文档或JSON内容,一个消息差不多有10-100M,这种情况下,Kakfa应该如何处理? 针对这个问题,有以下几个建议: ...

2017-01-23 19:39:21

阅读数:710

评论数:0

kafka性能调优

主要优化原理和思路 kafka是一个高吞吐量分布式消息系统,并且提供了持久化。其高性能的有两个重要特点:     利用了磁盘连续读写性能远远高于随机读写的特点;    并发,将一个topic拆分多个partition。 要充分发挥kafka的性能,就需要满足这两个条件 kafka读写的单位是...

2016-12-05 11:08:03

阅读数:1702

评论数:0

kafka数据同步/镜像工具 kafka mirror maker

默认安装kafka后有个Kafka MirrorMaker服务,无法启动。 2016-08-05 15:20:50,333 INFO kafka.tools.MirrorMaker$: Starting mirror maker 2016-08-05 15:20:50,356 ERRO...

2016-09-05 15:52:46

阅读数:1195

评论数:0

CDH集成kafka方法实践

(本文以KAFKA-2.0.2-1.2.0.2.p0.5-el6.parcel和CDH5.5.1版本截图,最后出现兼容问题,将KAFKA-2.0.2-1.2.0.2.p0.5-el6.parcel换为KAFKA-0.8.2.0-1.kafka1.4.0.p0.56-el6.parcel就正常,请大...

2016-09-05 14:32:28

阅读数:5512

评论数:0

KafkaOffsetMonitor监控工具的安装与使用

KafkaOffsetMonitor是有由Kafka开源社区提供的一款Web管理界面,这个应用程序用来实时监控Kafka服务的Consumer以及它们所在的Partition中的Offset,你可以通过浏览当前的消费者组,并且每个Topic的所有Partition的消费情况都可以观看的一清二楚。它...

2016-08-22 18:08:52

阅读数:1112

评论数:0

Kafka监控--KafkaOffsetMonitor安装部署

KafkaOffsetMonitor安装部署 KafkaOffsetMonitor是有由Kafka开源社区提供的一款Web管理界面,这个应用程序用来实时监控Kafka服务的Consumer以及它们所在的Partition中的Offset,你可以通过浏览当前的消费者组,并且每个Topic的所有Pa...

2016-04-13 14:27:47

阅读数:583

评论数:0

kafka-manager监控工具安装

kafka-manager监控工具安装 1、下载源码文件 https://github.com/yahoo/kafka-manager 安装sbt sbt是scala的打包构建工具。 http://www.scala-sbt.org/download.htmlubuntu下载、安装: 下载,...

2016-04-13 14:26:54

阅读数:3193

评论数:0

在Kafka上创建一个Topic及apache kafka中topic级别配置

手动创建 ./bin/kafka-topics.sh –zookeeper 172.16.8.225:2181/config/mobile/mq –create –topic test.example –replication-factor 2 –partitions 24 –topic指定top...

2016-04-13 14:08:27

阅读数:1277

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭