大数据—kafka
shuzulong
这个作者很懒,什么都没留下…
展开
-
【转载徐刘根的博客】Kafka简介、基本原理、执行流程与使用场景
转载自徐刘根的博客https://blog.csdn.net/xlgen157387/article/details/77266719一、简介Apache Kafka是分布式发布-订阅消息系统,在 kafka官网上对 kafka 的定义:一个分布式发布-订阅消息传递系统。 它最初由LinkedIn公司开发,Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。Kafka是一种快...转载 2018-06-14 10:24:08 · 318 阅读 · 0 评论 -
【转载】Kafka史上最详细原理总结
KafkaKafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎,web/nginx日志、访问日志,消息服务等等,用scala语言编写,Link...转载 2018-06-14 10:26:44 · 259 阅读 · 0 评论 -
【转载】kafka 基础知识梳理
一、kafka 简介 kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据。这种动作(网页浏览,搜索和其他用户的行动)是在现代网络上的许多社会功能的一个关键因素。这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。1.1 kafka名词解释producer:生产者。consumer:消费者。topic: 消息以topic为类别记录,K...转载 2018-06-15 11:23:39 · 274 阅读 · 0 评论 -
KafkaConsumer一些概念解释(从官方文档整理而来)
阅读之前假设您已经对kafka有了一定的了解详情和API请参考http://kafka.apache.org/0100/javadoc/index.html?org/apache/kafka/clients/consumer/KafkaConsumer.htmlKafkaConsumer类简介public class KafkaConsumer<K,V>extends Object i...转载 2018-06-15 11:25:06 · 5841 阅读 · 0 评论