- 博客(2)
- 资源 (2)
- 收藏
- 关注
原创 flume+kafka+storm+mysql 数据流
今天终于将 flume + kafka + storm + mysql 这条数据流走通了,虽然只是一个简单的测试例子,但是依据这条数据流可以做的事情很多。 先简单看一下这几个工具的架构吧,架构图会更好说明: flume的架构图: kafka的架构图: storm的架构图: 我们使用的 flume + kafka + storm +mysq
2012-10-21 20:14:57 17913 36
翻译 Kafka学习笔记
关于kafka的架构图在之前的一篇文章中有: http://wiki.corp.qunar.com/pages/viewpage.action?pageId=27866816 kafka的一些设计理念: 1、关注大吞吐量,而不是别的特性 2、针对实时性场景 3、关于消息被处理的状态是在consumer端维护,而不是由kafka server端维护。 4、分布式,producer、b
2012-10-21 20:03:12 10714
Data Science for Business
2016-06-29
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人