kafka
YY_pdd
linux and bigdata studying ......
展开
-
kafka常见面试题
kafka1、kafka名词解释和工作producer:消息生产者,就是向kafka broker发消息的客户端。consumer:消息消费者,向kafka broker取消息的客户端。topic:可以理解为一个队列。consumer group(CG):这是kafka用来实现一个topic消息的广播(发给所有人的consumer)和单播(发给任意一个consumer)的手段。一个topic可以有多个CG。topic的消息会复制(概念上的复制)到所有的CG,但每个partion只会把消息发给该原创 2020-11-01 23:40:44 · 2377 阅读 · 0 评论 -
flume和kafka的完美配合
flume和kafka的完美配合 一.为什么使用KafkaChannel? 在使用flume对接Kafka时,我们往往使用TailFileSource–>MemoryChannel–>KafkaSink的这种方式,然后将数据输送到Kafka集群中。如图转载 2020-10-28 20:08:29 · 486 阅读 · 0 评论