flume
文章平均质量分 78
「已注销」
这个作者很懒,什么都没留下…
展开
-
Flume(二) flume interceptor 拦截器
一、拦截器简介 拦截器是简单插件式组件,设置在Source和Source写入数据的Channel之间。每个拦截器实例只处理同一个Source接收到的事件。 因为拦截器必须在事件写入channel之前完成转换操作,只有当拦截器已成功转换事件后,channel(和任何其他可能产生超时的source)才会响应发送事件的客户端或sink,因此在拦截器中进行大量重量级的处理并不是一个好主原创 2018-01-10 22:43:28 · 418 阅读 · 0 评论 -
Flume(一)简介
前言: Flume是一个数据采集框架,因此要牢牢把握住数据的走向。即: 1、数据可以从哪些地方采集? source 2、数据中间可以缓存在哪些地方? channel 3、数据可以存储在哪些地方? sink 4、数据采集后缓存前可以对数据进行怎样的加工? flume interceptor 5、数据采集后缓存在哪个channel? channel sele原创 2018-01-10 17:40:49 · 298 阅读 · 0 评论