大数据
该取个啥名字呢
这个作者很懒,什么都没留下…
展开
-
【转载】探讨kafka的分区数与多线程消费
典型的kafka消费端消费数据的代码是十分典型的单线程消费。在本地玩玩熟悉kafka还行,(就跟入门Java学会写main方法打印hello world一样~~~~),问题是学的东西必须真正应用到实际中,你不可能只在单线程采集里原地打转吧。。so,多线程采集迫在眉急啊!!转载 2016-10-27 18:18:04 · 6702 阅读 · 0 评论 -
Kafka之我见
一、 什么是kafka? 答:kafka是一个高吞吐量、分布式的发布订阅消息系统,至于其吞吐量到底有多高,可以参考这篇博文:https://engineering.linkedin.com/kafka/benchmarking-apache-kafka-2-million-writes-second-three-cheap-machines,kafka被广泛应用于两大类的应用,分原创 2016-10-28 11:14:47 · 583 阅读 · 0 评论 -
kafka connect简介以及部署
Kafka Connect是一种用于在Kafka和其他系统之间可扩展的、可靠的流式传输数据的工具。它使得能够快速定义将大量数据集合移入和移出Kafka的连接器变得简单。原创 2017-02-26 15:43:24 · 45121 阅读 · 2 评论