Flume
文章平均质量分 67
死神的丧钟
这个作者很懒,什么都没留下…
展开
-
Flume学习04 — Sink
Flume提供了大量的Sink,下面主要介绍HDFS Sink、Avro Sink、Thrift Sink、Kafka Sink、HBase Sink。原创 2015-10-19 17:51:31 · 2496 阅读 · 1 评论 -
Flume学习03 — Channel
Flume提供了大量的Channel,下面主要介绍Memory Channel、File Channel、Kafka Channel和Spillable Memory Channel。原创 2015-10-19 17:23:24 · 6451 阅读 · 0 评论 -
Flume学习05
本文介绍Channel Selectors、Sink Processors和Flume Interceptors原创 2015-10-21 10:25:53 · 2017 阅读 · 0 评论 -
Flume学习06 — SDK
Flume SDK是一个提供Flume连接和向Flume发送数据(通过RPC)的类库。Flume SDK封装了底层的细节,只提供了统一接口,包括Flume连接、Event封装和Event发送等。原创 2015-10-27 16:31:21 · 2799 阅读 · 0 评论 -
Flume学习07 — FlumeRpcClientUtils工具类
FlumeRpcClientUtils提供通用的Event操作功能,通过配置文件可以在多个RpcClient之间进行切换。FlumeRpcClientUtils配置参数# 可选值default、thrift、default_failover、default_loadbalance# 其中default使用avro协议# 如果使用default_failover和default_loadbalan原创 2015-10-27 16:52:02 · 3494 阅读 · 1 评论 -
Flume学习02 — Source
Flume内置了大量的Sourece,其中Avro Source、Thrift Source、Spooling Directory Source、Kafka Source具有较好的性能和较广泛的使用场景,下面主要介绍这几种Source。原创 2015-10-14 10:32:37 · 4330 阅读 · 0 评论 -
Flume学习01
概述Apache Flume是一个分布式的、可靠的和可用的系统,它能把不同数据源的海量日志数据有效地收集、汇总和移动,最后存入一个集中式数据存储系统中。Flume是Apache顶级开源项目,目前有0.9.x和1.x两个主要系列,其中0.9.x系列是Flume OG(Original Generation),1.x是Flume NG(Next Generation),Flume NG比Flume OG原创 2015-10-13 18:00:08 · 2486 阅读 · 1 评论