flume
Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力 。
GM.Francis
创造机会,把握机会
展开
-
大数据高频面试题-Flume相关总结
4.4Flume相关总结4.4.1 Flume组成,Put事务,Take事务 4.4.2 Flume拦截器 4.4.3 Flume Channel选择器 4.4.4 Flume监控器 4.4.5 Flume采集数据会丢失吗? 4.4.6 Flume内存 4.4.7 FileChannel优化 4.4.8 HDFS Sink小文件处理4.4.1 Flume组成,Put事务,Take事务1)Flume组成,Put事务,Take事务Taildir Source:断点续...原创 2020-07-10 09:07:37 · 330 阅读 · 0 评论 -
flume-demo.cnf
a1.sources = r1a1.sinks = k1a1.channels = c1a1.sources.r1.type = spooldira1.sources.r1.spoolDir = /data/flumea1.sinks.k1.type = hdfsa1.sinks.k1.hdfs.path = hdfs://hadoop-master:9000/user/root/flume/%y-%m-%d/%H%M/%Sa1.sinks.k1.hdfs.rollSize = 1024.原创 2020-06-13 19:42:03 · 183 阅读 · 0 评论