关闭

flume 拦截器

a4.sources.r1.interceptors = i1 i2 a4.sources.r1.interceptors.i1.type = org.apache.flume.interceptor.TimestampInterceptor$Builder a4.sources.r1.interceptors.i2.type=host a4.sources.r1.interceptors.i2.u...
阅读(122) 评论(0)

flume搭建

tar -zxvf apache-flume-1.5.0-bin.tar.gz -C 路径 bin 目录下只有flume-ng conf 目录下有flume-conf.properties.template flume-env.sh.template log4j.properties 重命名 mv flume-env.sh.template flume-env.sh/etc/profile...
阅读(609) 评论(0)

Flume

Flume海量日志采集、聚合和传输的系统 Flume-Og Flume-Og采用了分层架构:分别为agent,collector和storage。其中,agent和collector均由两部分组成:source和sink,source是数据来源,sink是数据去向。storage是存储系统,可以是一个普通file,也可以是HDFS,HIVE,HBase,分布式存储等。 Master是管理协...
阅读(768) 评论(0)
    个人资料
    • 访问:17436次
    • 积分:802
    • 等级:
    • 排名:千里之外
    • 原创:51篇
    • 转载:76篇
    • 译文:0篇
    • 评论:0条
    文章分类
    评论排行