Flume
文章平均质量分 84
GCH6969
让我们一起进击吧
展开
-
FLume 常用Source配置说明
1.SourceSource 的类型常用source类型Avro SourceAvro Source监听Avro端口,接收从外部Avro客户端发送来的数据流。如果与上一层Agent的 Avro Sink 配合使用就组成了一个分层的拓扑结构。样例a1.sources = r1a1.channels = c1a1.sources.r1.type = avroa1.sources.r1.channels = c1a1.sources.r1.bind = 0.0.0.0a1.sources.翻译 2021-09-02 16:27:18 · 1927 阅读 · 0 评论 -
Flume是什么
Flume简介1.Flume提供一种分布式的,可靠地,对大量数据的日志进行高效处理,聚集,移动的服务。flume只能在Unix的环境下运行。 2.Flume基于流式框架,容错性强,也灵活简单。 3.Flume,Kafka用来进行数据收集的,Spart,Storm用来实时处理数据,impala用来实时查询。Flume角色1.Source 用于采集数据,Source是产生数据流的地方,同时原创 2017-12-29 14:05:48 · 1994 阅读 · 0 评论 -
Flume测试案例
案例一:监控端口数据目标:Flume监控一端Console,另一端Console发送消息,使被监控端实时显示。1.安装telnet工具 rpm -ivh xinetd-2.3.14-40.el6.x86_64.rpm rpm -ivh telnet-0.17-48.el6.x86_64.rpm rpm -ivh telnet-server-0.17-48.el6.x86_64.rpm 2.创原创 2017-12-29 20:25:50 · 590 阅读 · 0 评论