大数据-KafKa
帅气的程序员
学习使我快乐
展开
-
Kafka查看最大偏移量(总消息个数)
bin/kafka-run-class.sh kafka.tools.GetOffsetShell --broker-list 127.0.0.1:9092 --topic Worm --time -1原创 2020-03-06 20:02:13 · 6043 阅读 · 0 评论 -
KafKa的配置文件
//Server.properties#broker的全局唯一编号,不能重复broker.id=0#用来监听链接的端口,producer或consumer将在此端口建立连接port=9092#处理网络请求的线程数量,也就是接收消息的线程数。#接收线程会将接收到的消息放到内存中,然后再从内存中写入磁盘。num.network.threads=3#消息从内存中写入磁盘是时候使用的线程数量。#用原创 2017-12-14 08:59:21 · 335 阅读 · 0 评论 -
Kafka监控 工具
下载jar包地址 https://pan.baidu.com/s/1ntzIUPN启用: java -cp KafkaOffsetMonitor-assembly-0.2.0.jar \ com.quantifind.kafka.offsetapp.OffsetGetterWeb \ –zk dn1:2181,dn2:2181,dn3:2181 \ –port 8089 \原创 2017-12-27 10:53:26 · 399 阅读 · 0 评论 -
Kafka集群搭建 以及命令
好久没有写博客了 有点懒 赶紧补一下 Kafka集群 搭建 测试机 三个节点 hadoop1 hadoop2 hadoop3 这三个节点 安装了独立的zookeeper 且我其他hadoop hbase等元数据信息都在上面 我不用Kafka自带的 zookeeper本次的版本是:/kafka_2.10-0.10.0.1修改配置:kafka_2.10-0.10.0.1/conf原创 2018-01-05 09:25:07 · 559 阅读 · 0 评论