- 博客(2)
- 资源 (3)
- 收藏
- 关注
原创 搭建yarn集群
前提条件:已安装hadoop 修改配置文件 yarn-site.xml 然后复制到每台机器 $PWD 当前目录 修改slaves文件 修改hadoop的slaves文件,列入要启动nodemanager的机器,然后将hdfs111到所有机器的免密登陆配置好。 脚本启动yarn集群 ...
2018-11-02 17:48:45 377
转载 深入理解MapReduce
MapReduce理解MapRedeuce,我们可以把它分开来理解:映射(Mapping) :对集合里的每个目标应用同一个操作。即,如果你想把表单里每个单元格乘以二,那么把这个函数单独地应用在每个单元格上的操作就属于mapping(这里体现了移动计算而不是移动数据); 化简(Reducing):遍历集合中的元素来返回一个综合的结果。即,输出表单里一列数字的和这个任务属于reducing。...
2018-11-02 16:52:17 338
Python入门代码-零基础学Python
2018-05-23
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人