flume
flume的介绍及运用
阿东在路上
这个作者很懒,什么都没留下…
展开
-
Flume Agent内部原理及其三大组件
1.Agent内部原理工作流程:(1)数据通过Source采集进入Flume,Flume以通过Agent以事件的形式将数据从源头到目的地。(2)进入事件处理,Event为传输单元,由可选的header和载有数据的body(byte array)构成。(3)在agent可对数据进行粗步拦截,排除某些不采集的文件,文件类型。(4)Channel选择器,两种Channel Selector,一种是Replicating channel另一种是Multiplexing Channel...原创 2020-05-31 15:24:37 · 4077 阅读 · 0 评论 -
flume入门
1. flume定义 Flume is a distributed, reliable, and available service for efficiently collecting, aggregating, and moving large amounts of log data. It has a simple and flexible architecture based on streaming data flows. It is robust and fault tol...原创 2020-05-26 17:33:38 · 183 阅读 · 0 评论