- 博客(4)
- 收藏
- 关注
RSS订阅原创 Hadoop搭建的笔记整理
map 函数接收一个<key,value>形式的输入，然后同样产生一个<key,value>形式的中间输出，reduce 函数接收一个如<key,(list of values)>形式的输入，然后对这个 value 集合进行处理，每个reduce 产生0或1个输出，reduce 的输出也是<key,value>形式的。org.apache.hadoop.mapred是hadoop 1.x版本的,负责资源的调度和计算。hdfs dfs -tail 源文件的路径 查看文件最后1024KB的内容。
2024-06-06 09:11:49
603
原创 Hadoop的集群搭配
scp -r /export/software/hadoop-2.4.1 slave2:/export/software/出现就成功了4.启动和关闭集群。
2024-04-18 09:44:46
512
1
原创 Hodoop配置host的映射
第三步:创建module和softwear mkdir -p /opt/module。第五步:环境变量的配置 1:vi /etc/profile.d/my_env.sh。第二步：在用户root/opt/下面操作 cd /etc/opt。第六步:生效环境变量的配置: source /etc/profi。第一步：打开虚拟机并与MobaXtrem连接。第四步:1:下载并上传安装包。第七步:一台主机像另一台传输文件。
2024-03-24 22:01:37
286
1
原创 Hodoop虚拟机创建与克隆IP配置和远程操控
虚拟机的创建 一：点击创建新的虚拟机 二：IP配置和远程操控 1：修改主机名：hostnamectl set-hostname+主机名 2：查看主机的ip地址：IP addr 3:主机的IP变成静态固定IP：vi /etc/sysconfig/network-scripts/ifcfg-ens32 BOOTPROTO="static"IPADDR=你自己的IP地址 NETMASK=255.255.255.0 GATEWAY=自己的IP地址并将最后一位数修改2-255之间的数字 D
2024-03-15 19:10:11
465
2
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人