hadoop
zwbill
这个作者很懒,什么都没留下…
展开
-
Hadoop HDFS本地存储目录结构解析
Hadoop HDFS本地存储目录结构解析 原创 2016年05月19日 11:38:21 标签:hadoop /hdfs /metadata / 9207转载 2017-10-18 12:44:30 · 523 阅读 · 0 评论 -
彻底理解MapReduce shuffle过程原理
http://blog.csdn.net/techchan/article/details/53405519 MapReduce的Shuffle过程介绍 Shuffle的本义是洗牌、混洗,把一组有一定规则的数据尽量转换成一组无规则的数据,越随机越好。MapReduce中的Shuffle更像是洗牌的逆过程,把一组无规则的数据尽量转换成一组具有一定规则的数据。 为什么MapR转载 2018-01-31 21:52:28 · 416 阅读 · 0 评论 -
hadoop2.9安装指南
1、到hadoop官网下载最新的二进制版本。 2、把压缩包上传到你的linux服务器、解压缩、配置环境变量. ps:我这里用的是centos6.9,你也可以用别的linux,譬如ubuntu。 解压缩命令: tar -zxvf hadoop-2.9.0.tar.gz 文件夹重命名:mv hadoop-2.9.0 hadoop 配置环境变量:vim /etc/profileexport PATH=....转载 2018-04-26 22:22:31 · 301 阅读 · 0 评论