大数据
文章平均质量分 70
Wake_me_Up123
我是程序媛~~~~~~~~~~
展开
-
hadoop的配置安装
下载Ubuntu下载完成后创建hadoop用户,密码为1.Ctrl+Alt+T打开一个终端,输入如下命令创建hadoop用户: sudo useradd -m hadoop -s /bin/hash//创建新用户hadoop sudo passwd hadoop//选择要设置密码的用户hadoop 1//设置密码:1 sudo adduser hadoop sodu//原创 2016-09-22 23:01:46 · 382 阅读 · 0 评论 -
MapReduce简介
简介Mapreduce,一种编程模型,也可以说是一个处理和生成超大数据集的算法模型的相关实现。首先用户要创建一个Map函数,用来处理一个机遇key/value pair的数据集合,以输出中间的机遇key/value pair的数据集合;然后再创建Reduce函数用来将所有的具有相同中间key值的中间value值。 在过去的几年中,所有的程序员为了处理海量的原始数据,已经实现了数以百计的、专用的计算方原创 2017-04-14 17:17:25 · 643 阅读 · 0 评论