![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
李大瑞瑞儿
这个作者很懒,什么都没留下…
展开
-
Kafka Producer 发送数据
Kafka Producer 发送数据(1)生产者概览(1)不同的应用场景对消息有不同的需求,即是否允许消息丢失、重复、延迟以及吞吐量的要求。不同场景对Kafka生产者的API使用和配置会有直接的影响。(2)Kafka发送消息的主要步骤消息格式:每个消息是一个ProducerRecord对象,必须指定消息所属的Topic和消息值Value,此外还可以指定消息所属的Partition以及消...转载 2018-11-07 11:12:39 · 43480 阅读 · 1 评论 -
大数据处理框架: Flume + Redis4.0.11 集群
上一篇文章关于Storm kafka Zookeeper 集群、本次加入Flume Redis 的集群Apache Flume是一个分布式,可靠且可用的系统,用于高效地收集,汇总和将来自多个不同源的大量日志数据移动到集中式数据存储。Apache Flume的使用不仅限于日志数据聚合。由于数据源是可定制的,因此Flume可用于传输大量事件数据,包括但不限于网络流量数据,社交媒体生成的数据,电子邮...原创 2018-11-23 18:39:33 · 1167 阅读 · 1 评论