![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
FLUME
萌新Java程序猿
java个人心得
展开
-
Flume个人心得笔记
一、概述Flume是Apache提供的开源的、分布式的、可靠的日志收集系统 能够有效的收集、聚合、传输大量的日志数据 Flume有2个版本:Flume-og(Flume0.9x)和Flume-ng(Flume1.X)。Flume-og和Flume-ng不兼容二.Flume的特性可靠性:事务型的数据传递,保证数据的可靠性。一个日志交给flume来处理,不会出现此日志丢失或未被处理的情况...原创 2019-07-05 19:23:15 · 925 阅读 · 0 评论 -
Flume个人心得笔记之Source安装
Flume个人心得笔记之Source安装目录 Flume个人心得笔记之Source安装一.Flume基本案例一.启动命令二.下载文件并解压三、示例:1.创建一个Data文件夹2.编辑一个文件3.进入bin下 执行该指令4...原创 2019-07-05 20:09:05 · 572 阅读 · 0 评论 -
Flume个人心得笔记之Channel安装
Flume个人心得笔记之Channel安装全解目录 Flume个人心得笔记之Channel安装全解一.Memory Channel一、概述二、可配置选项说明三、示例:二.File Channel一、概述二、可配置选项说明三、示例1.复制一份文件2.编辑配置4.确保目录产生5.启动...原创 2019-07-05 20:22:35 · 1249 阅读 · 0 评论 -
Flume个人心得笔记之Sink安装
Flume个人心得笔记之Sink安装目录 Flume个人心得笔记之Sink安装一.Logger Sink一、概述二、可配置项说明三、示例二.File_roll Sink一、概述二、可配置选项说明三、示例1.复制文本2.编辑配置3.启动指令 启动不了,杀死对应进程重...原创 2019-07-05 21:23:32 · 3233 阅读 · 0 评论 -
Flume个人心得笔记之Selector安装
Flume个人心得笔记之Selector安装目录 Flume个人心得笔记之Selector安装一.复制模式一、概述二、 可配置选项说明三、示例二.多路复用模式一、概述二、可配置选项说明三、示例1.概述2.配置第一个节点配置3.启动4.发送数据5.接收数据一.复制模式...原创 2019-07-06 20:17:21 · 404 阅读 · 0 评论 -
Flume个人心得笔记之Interceptor安装
Flume个人心得笔记之Interceptor安装目录 Flume个人心得笔记之Interceptor安装一.概述二.Timestamp Interceptor一、概述二、可配置项说明三、配置示例1.创建文件2.配置第一个节点,2,3默认扇出3.启动4.传输数据5.接收数据 -时间检测7.启动8.传输...原创 2019-07-06 21:03:49 · 264 阅读 · 0 评论 -
Flume个人心得笔记之Process安装
Flume个人心得笔记之Process安装目录 Flume个人心得笔记之Process安装一.概述二.Default Sink Processor一、概述二、可配置选项说明三.Failover Sink Processor一、概述二、可配置项说明三、示例四.Load Balanci...原创 2019-07-06 21:09:46 · 372 阅读 · 0 评论 -
Flume个人心得笔记之事务机制
Flume个人心得笔记之事务机制目录 Flume个人心得笔记之事务机制一、概述二、put事务流程三、Take事务一、概述Flume的事务机制与可靠性保证的实现,最核心的组件是Channel(通道)。如果没有Channel组件,而紧靠Source与...原创 2019-07-06 21:25:53 · 865 阅读 · 0 评论