Flume
积微成著
每一个你不满意的现在,都有一个你没有努力的曾经。
展开
-
Flume——开发案例
Flume——开发案例 监控端口数据发送到控制台 source:netcat channel:memory sink:logger # Name the components on this agent a1.sources = r1 a1.sinks = k1 a1.channels = c1 # Describe/configure the source a1.sources.r1.ty...原创 2020-04-06 15:24:51 · 274 阅读 · 0 评论 -
Flume——简介及架构
简介 Apache Flume是一个分布式、高可用、高可靠的系统,可以有效地从许多不同的源收集、聚合和移动海量日志数据到集中式数据存储。 Flume可用于传输大量事件数据: 日志数据 网络流量数据 社交媒体数据 电子邮件消息 …… 优势 支持将数据存储到任何集中存储器中,比如HDFS,Hive,HBase; 当传入数据的速率超过可以将数据写入目标的速率时,flume充当数据生产者和集中存储之...原创 2020-04-03 22:32:45 · 615 阅读 · 0 评论