![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
一梦
这个作者很懒,什么都没留下…
展开
-
Hadoop管理员的十个最佳实践
前言 接触Hadoop有两年的时间了,期间遇到很多的问题,既有经典的NameNode和JobTracker内存溢出故障,也有HDFS存储小文件问题,既 有任务调度问题,也有MapReduce性能问题.遇到的这些问题有些是Hadoop自身的缺陷(短板),有些则是使用的不当。 在解决问题的过程中,有时需要翻源码,有时会向同事、网友请教, 遇到复杂问题则会通过mail list向全球各地Had转载 2013-03-04 20:38:39 · 403 阅读 · 0 评论 -
基于Hadoop的日志收集框架---Chukwa的源码分析(数据处理)
基于Hadoo的日志收集框架---Chukwa的源码分析(数据处理) 1.工具类、接口简介 (1) Java代码 // 用于对数据进行分类 org.apache.hadoop.chukwa.extraction.demux.DemuxManager // mapreduce程序的map处理接口 org.ap转载 2012-08-30 20:32:34 · 1014 阅读 · 0 评论