MapReduce
文章平均质量分 81
leongfans
这个作者很懒,什么都没留下…
展开
-
使hadoop支持Splittable压缩lzo
使hadoop支持Splittable压缩lzo上一篇 / 下一篇 2009-12-31 18:57:20 / 个人分类:hadoop查看( 421 ) / 评论( 2 ) / 评分( 0 / 0 ) 在hadoop中使用lzo的压缩算法可以减小数据的大小和数据的磁盘读写时间,不仅如此,lzo是基于block分块的,这样他就允许数据被分解成chunk,并行的被hadoo...原创 2011-10-13 09:28:43 · 92 阅读 · 0 评论 -
Hadoop源码解读-Http服务器Jetty的使用
Hadoop内嵌了Http服务器Jetty,主要有以下两方面的作用1、Web访问接口,用于展示Hadoop的内部状态2、参与Hadoop集群的运行和管理 以Namenode为例Namenode通过startHttpServer(conf); 来启动HttpServer(Jetty),具体代码如下 httpServer = new HttpSe...原创 2011-12-29 12:05:54 · 653 阅读 · 0 评论