![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Flume
文章平均质量分 96
绿萝蔓蔓绕枝生
这个作者很懒,什么都没留下…
展开
-
Flume简介
目录一、概览1、简介2、下载安装二、体系结构1、数据流模型2、复杂流3、可靠性4、可恢复性三、配置Flume Agent1、单节点Flume控制台输出2、读取文件为Event控制台输出3、读取文件夹生成Event控制台输出4、读取文件夹生成Event上传到HDFS 一、概览 1、简介 Apache Flume 是一个分布式、高可靠、高可用的用来收集、聚合、转移不同来源的大量日志数据到中央数据仓库的工具 Apache Flume是Apache软件基金会(ASF)的顶级项目 目前有两个发行版本,0.原创 2020-12-03 19:09:56 · 385 阅读 · 0 评论 -
Flume日志收集系统
一、客户端获取数据,logger输出 创建 flume 文件netcat-flume-logger.conf a1.sources=r1 a1.channels=c1 a1.sinks=k1 a1.sources.r1.type=netcat a1.sources.r1.bind=localhost a1.sources.r1.port=7777 a1.channels.c1.type=memory a1.channels.c1.capacity=1000 a1.channels.c1.transact原创 2021-01-14 19:50:01 · 328 阅读 · 0 评论