flume
文章平均质量分 78
「已注销」
这个作者很懒,什么都没留下…
展开
-
Flume(二) flume interceptor 拦截器
一、拦截器简介拦截器是简单插件式组件,设置在Source和Source写入数据的Channel之间。每个拦截器实例只处理同一个Source接收到的事件。因为拦截器必须在事件写入channel之前完成转换操作,只有当拦截器已成功转换事件后,channel(和任何其他可能产生超时的source)才会响应发送事件的客户端或sink,因此在拦截器中进行大量重量级的处理并不是一个好主原创 2018-01-10 22:43:28 · 410 阅读 · 0 评论 -
Flume(一)简介
前言:Flume是一个数据采集框架,因此要牢牢把握住数据的走向。即:1、数据可以从哪些地方采集? source2、数据中间可以缓存在哪些地方? channel3、数据可以存储在哪些地方? sink4、数据采集后缓存前可以对数据进行怎样的加工? flume interceptor5、数据采集后缓存在哪个channel? channel sele原创 2018-01-10 17:40:49 · 283 阅读 · 0 评论