kafka
猛波波
一个野人。
展开
-
kafka系列——kafka集群搭建(一)
前言:前面搭好了kafka要依赖的zookeeper(其实kafka自己内置了zookeeper,但我还是用自己搭的),现在开始搭建kafka集群。在/opt目录解压后,进入config/server.properties修改:broker.id=1 #每个kafka节点要唯一listeners=PLAINTEXT://192.168.1.128:9092 #对应的kafka机器的i...原创 2019-04-16 11:17:03 · 303 阅读 · 0 评论 -
kafka系列——kafka实用命令(二)
前言:最近用kafka比较多,记录一下命令。1,查看kafka的topic列表bin/kafka-topics.sh --list --zookeeper 172.18.215.18:21812, 启动一个生产者,并向 dofun-testhaha这个topic发送数据./bin/kafka-console-producer.sh --broker-list 172.18...原创 2019-05-29 17:53:59 · 193 阅读 · 0 评论 -
kafka系列——kafka生产中消费速度慢的问题(三)
前言:kafka是个高吞吐的消息中间件,有着削峰填谷的作用。最近在生产中,发现消费速度跟不上生产速度,很是好奇,kafka不是号称高吞吐吗?难道是kafka吐的太慢了?后来查了很多资料,总算弄清了点头绪。不是kafka的锅,是自己的消费者消费能力不行导致。生产者一般不会有啥问题,因为是写进kafka,数据如果要处理的话,处理中的数据和kafka还没关系,等数据处理完要最终写入kafka了的...原创 2019-05-29 18:31:52 · 16743 阅读 · 2 评论