![](https://img-blog.csdnimg.cn/20190928165456963.jpg?x-oss-process=image/resize,m_fixed,h_224,w_224)
Kafka
大马猴JAVA学习
这个作者很懒,什么都没留下…
展开
-
Kafka(四):整合logstash
logstash作用logstash的作用是日志收集器,在我这个例子里,我的input是命令行的标准输入,而output为kafka和命令行标准输出。 logstash的配置信息为:input { stdin {}}output { kafka { topic_id => "drTest" bootstrap_servers => "192.16...转载 2018-12-28 17:02:49 · 235 阅读 · 0 评论 -
Kafka(三):和storm整合保序
保证storm和kafka上的消息有序整体流程:kafka生产者->kafka消费者->spout->bolt: kafka的生产者按制定字段发送到指定主题上,保证一类消息的先后次序(如果想要所有的消息都有序,可以只用一个分区,但是这样就只能有一个消费者消费)producer = kafkaClientService.< String, String > n...转载 2018-12-28 17:03:55 · 279 阅读 · 0 评论 -
Kafka(二)docker版安装入门
kafka是一个可靠的消息中间件(生产者和消费者模式)。kafka可以用于构建实时的数据管道、有强大水平扩展能力、处理效率很高参考:http://kafka.apache.org基础概念http://kafka.apache.org/intro安装docker中使用kafka:https://www.jianshu.com/p/263164fdcac7下载kafk...转载 2018-12-28 17:05:08 · 231 阅读 · 0 评论 -
Kafka(一) 概述
概览- kafka解决的问题- 主题 - 分区 - 消息- 生产者- broker - broker集群- 消费者 - 消费者组群 - 生产者分区和消费者群组- 消息可靠性- 消息系统 - 队列和广播 - 消息保序- 存储系统- 流处理- 整合- 应用场景- api分类kafka解决的问题生产者种类多,数...转载 2018-12-28 17:07:45 · 218 阅读 · 0 评论