![](https://img-blog.csdnimg.cn/20210706184324640.jpg?x-oss-process=image/resize,m_fixed,h_224,w_224)
Flume
文章平均质量分 78
Flume相关文章
Edwin's blog
这个作者很懒,什么都没留下…
展开
-
Flume的三种基本采集方式(三)
一、Syslog方式 Flume提供了Syslog的方式,通过TCP/UDP通信协议直接对某台主机上的某个端口进行监听,实现了采集端主动采集端口日志的功能,提高了可靠性。 Syslog可以通过Syslog协议读取系统日志,协议分为TCP和UDP两种,使用时需指定IP地址和端口。这里以监听本机的5140端口为例。 进入 Flume的conf目录,创建名称为 syslogtcp.conf的配置文件, 配置信息如下 # 组件命名 agent1.sources = r1 agent1.channels = c1原创 2021-07-26 18:29:59 · 1959 阅读 · 0 评论 -
Flume安装部署(二)
安装Flume前我们需要确保已安装Java环境 拷贝安装包,我这里给出了flume1.9版本的包,需要自取 链接:apache-flume-1.9.0-bin.tar 提取码:tjri 1.创建目录 mkdir -p /home/software/flume/ 2.解压flume安装包到指定目录 tar -zxvf apache-flume-1.9.0-bin.tar.gz -C /home/software/flume 解压成功 3.进入Flume中看一下它的文件 bin目录下存放的是Flume原创 2021-07-08 18:13:38 · 191 阅读 · 0 评论 -
Flume详解(一)
一、Flume介绍 Flume Apache Flume是一个分布式,高可用可靠的服务,能够高效的收集并聚合大量日志数据,它基于流式数据流的结构,能够将数据写入多种数据接收方。 二、几个重要概念 1.Event 事件是Flume数据传输的基本数据单位,它携带着数据信息。 2.Agent Flume包含一个或者多个Agent,可以把Agent当做一个独立的进程,它的主要作用就是从客户端接收数据,并将数据传给下一个目标节点。 3.Source Source是Agent中的一员,它主要用来从数据发生方接收数据,并原创 2021-07-06 18:40:16 · 735 阅读 · 0 评论