- 博客(6)
- 收藏
- 关注
RSS订阅原创 Hadoop5.30
map方法接收一个<key, value>形式的输入，然后同样产生一个<key, value>形式的中间输出，reduce方法接收一个如<key, (list of values)>形式的输入，然后对这个value集合进行处理，每个reduce产生0或1个输出，reduce的输出也是<key, value>形式的。Mapper类有两个包：org.apache.hadoop.mapreduce、org.apache.hadoop.mapred。，Job将数据划分为多个数据块，每个数据块对应一个计算任务(
2024-05-30 11:04:21
366
原创 Hadoop平台搭建总结
5.远程连接master slave1 slave2。21.向slave1和slave2传Hadoop。17.jdk向slave1和slave2传输。2.查看主机ip地址 查看网络（三台）23.slave1和slave2查询。3.配置静态ip并重启网络（三台）4.关闭、查看、移除防火墙（三台）6.ip地址和主页名的映射（三台）1.修改主机名并重启（两台）7.查看是否连接成功（三台）9.查看是否可以登录（三台）10.修改uuid（三台）12.进入software。14.解压到指定文件夹。8.免密登录（三台）
2024-03-30 17:55:36
186
1
原创 jdk安装及配置环境变量
tar -zxvf hadoop+tab键补全 -C /opt/software。mkdir -p /opt/software 用来存放安装包的压缩包。tar -zxvf jdk+tab键补全 -C /opt/module。mkdir -p /opt/module 用来存放解压后的软件。生效环境变量的配置：source /etc/profile。出现/opt/module/jdk......复制。再将JAVA_HOME引用到path环境变量中。重新连接一个master。
2024-03-24 22:40:58
163
2
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人