map/reduce
文章平均质量分 65
huanyingjung
这个作者很懒,什么都没留下…
展开
-
Hadoop平台优化综述
1. 概述 随着企业要处理的数据量越来越大,MapReduce思想越来越受到重视。Hadoop是MapReduce的一个开源实现,由于其良好的扩展性和容错性,已得到越来越广泛的应用。Hadoop作为一个基础数据处理平台,虽然其应用价值已得到大家认可,但仍存在很多问题,以下是主要几个: (1) Namenode/jobtracker单点故障。 Hadoop采用的是master/s...原创 2012-10-25 11:55:49 · 158 阅读 · 0 评论 -
hadoop 笔记
hadoop博客地址: http://langyu.iteye.com/category/177430 Shuffle,奇迹发生的地方,mapreduce的核心: http://langyu.iteye.com/blog/992916 2、hadoop执行hdfs命令报错: ipc.Client: Retrying connect to server: 原因是:hadoop...原创 2012-10-26 11:30:41 · 89 阅读 · 0 评论