- 博客(2)
- 资源 (3)
- 收藏
- 关注
原创 Flume(二) flume interceptor 拦截器
一、拦截器简介拦截器是简单插件式组件,设置在Source和Source写入数据的Channel之间。每个拦截器实例只处理同一个Source接收到的事件。因为拦截器必须在事件写入channel之前完成转换操作,只有当拦截器已成功转换事件后,channel(和任何其他可能产生超时的source)才会响应发送事件的客户端或sink,因此在拦截器中进行大量重量级的处理并不是一个好主
2018-01-10 22:43:28 409
原创 Flume(一)简介
前言:Flume是一个数据采集框架,因此要牢牢把握住数据的走向。即:1、数据可以从哪些地方采集? source2、数据中间可以缓存在哪些地方? channel3、数据可以存储在哪些地方? sink4、数据采集后缓存前可以对数据进行怎样的加工? flume interceptor5、数据采集后缓存在哪个channel? channel sele
2018-01-10 17:40:49 283
Flink Streaming SQL 基础
2018-11-19
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人