Flume
isOllie
一只菜鸡
展开
-
Flume flume的高级组件(拦截器,选择器和Sink的处理器)
Flume Interceptors:拦截器 功能:通过拦截器对每条数据进行过滤和包装 Timestamp Interceptor:时间戳拦截器 -》在每一个event的头部添加一个keyvalue key:timestamp value:当前封装event的时间 Host Interceptor:主机名拦截器 -》在每一个event的头部添...原创 2019-07-15 22:39:34 · 713 阅读 · 0 评论 -
Flume ———— 拦截器(Interceptor)
Flume中的拦截器(interceptor),当Source读取events发送到Sink的时候,在events header中加入一些有用的信息,或者对events的内容进行过滤,完成初步的数据清洗。这在实际业务场景中非常有用,Flume-ng 1.7中目前提供了以下拦截器:Timestamp Interceptor;Host Interceptor;Static Intercepto...转载 2019-07-17 22:21:02 · 421 阅读 · 0 评论