Flume
Bonyin
这个作者很懒,什么都没留下…
展开
-
关于flume里面两种source的区别,以及操作的时候报相关的错误。
Exec Source 可以将命令产生的输出作为源 属性说明: !channels – !type – 类型名称,需要是"exec" !command – 要执行的命令 shell – A shell invocati...原创 2018-09-18 15:21:54 · 1174 阅读 · 0 评论 -
关于flume里面channel的事务工作流。
Flume的channel是事务性的,事务是原子操作,要么全部成功,要么失败。flume依赖事务来保证event的可靠性,从source-side到channel,channel到sink-side 端。只有sink端的事务提交成功之后,那么这个batch的event才可以从channel里面删除。每个channel可以有多个source和sink。source-side的事务是由channel的...原创 2018-10-25 16:10:54 · 782 阅读 · 0 评论