flume
qinzl_1
这个作者很懒,什么都没留下…
展开
-
Flume-ng采集数据到HDFS时,生成的文件中,有头信息
Flume-ng采集数据到HDFS时,生成的文件中,有头信息 2013-10-14 10:43:24| 分类: hadoop|举报|字号 订阅Flume版本为Flume-ng 1.4,配置文件如下。在生成的HDFS文件中,总是有“SEQ!org.apache.hadoop.io.LongWritable"org.apache.hadoop.io.B转载 2014-07-26 18:54:24 · 510 阅读 · 0 评论 -
Flume-ng分布式环境的部署和配置
原文地址:http://www.linuxidc.com/Linux/2013-06/86598.htm转载 2014-06-27 15:50:58 · 1594 阅读 · 0 评论 -
Flume配置-Failover
日志这个东西呢,说重要非常重要,做数据挖掘和分析都全靠它了。说不重要也不重要,毕竟不是用户数据。不管怎么样我们还是希望得到一个可靠的日志收集系统。Flume本身提供了failover机制,可以自动切换和恢复。在我们的实践中,有多个产生日志的服务器分布在全球不同地方的机房,然后要把所有的日志都收集到一个集中存放的存储中。这里我简化了整个结构做一个例子。1台game服务器,上面部署agent,转载 2014-06-30 19:38:54 · 568 阅读 · 0 评论 -
Flume配置-Failover
原文地址:http://withu.im/flume-configuration-failover.html转载 2014-08-05 17:05:05 · 132 阅读 · 0 评论