flume
sj天问
这个作者很懒,什么都没留下…
展开
-
Flume开发案例
复制和多路复用 1)案例需求 使用Flume-1监控文件变动,Flume-1将变动内容传递给Flume-2,Flume-2负责存储到HDFS。同时Flume-1将变动内容传递给Flume-3,Flume-3负责输出到Local FileSystem。 2)需求分析:原创 2020-11-03 18:33:37 · 120 阅读 · 0 评论 -
Flume内部原理与拓扑结构
Flume事务 Flume Agent内部原理 重要组件: 1)ChannelSelector ChannelSelector的作用就是选出Event将要被发往哪个Channel。其共有两种类型,分别是Replicating(复制)和Multiplexing(多路复用)。 ReplicatingSelector会将同一个Event发往所有的Channel,Multiplexing会根据相应的原则,将不同的Event发往不同的Channel。 2)SinkProcessor SinkProcessor共有原创 2020-11-03 18:30:51 · 108 阅读 · 0 评论