![](https://img-blog.csdnimg.cn/20201014180756919.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
实时查询
李大瑞瑞儿
这个作者很懒,什么都没留下…
展开
-
大数据处理框架: Flume + Redis4.0.11 集群
上一篇文章关于Storm kafka Zookeeper 集群、本次加入Flume Redis 的集群Apache Flume是一个分布式,可靠且可用的系统,用于高效地收集,汇总和将来自多个不同源的大量日志数据移动到集中式数据存储。Apache Flume的使用不仅限于日志数据聚合。由于数据源是可定制的,因此Flume可用于传输大量事件数据,包括但不限于网络流量数据,社交媒体生成的数据,电子邮...原创 2018-11-23 18:39:33 · 1167 阅读 · 1 评论 -
大数据处理框架之:Storm + Kafka + zookeeper 集群
Storm kafka zookeeper 集群我们知道storm的作用主要是进行流式计算,对于源源不断的均匀数据流流入处理是非常有效的,而现实生活中大部分场景并不是均匀的数据流,而是时而多时而少的数据流入,这种情况下显然用批量处理是不合适的,如果使用storm做实时计算的话可能因为数据拥堵而导致服务器挂掉,应对这种情况,使用kafka作为消息队列是非常合适的选择,kafka可以将不均匀的数据转...原创 2018-11-13 16:58:03 · 4101 阅读 · 0 评论