Hadoop虚拟机集群搭建及配置详解

配置步骤

（详细步骤请看我上次的Hadoop2.6.4/2.7.3环境配置文件）

1.新建Linux虚拟机
2.安装jdk，获得root权限
3.安装成功后复制两个虚拟机，分别分别命名master、slave1、slave2
4.将三个虚拟机相互连通，配置SSH无密钥登录
5.在master中配置Hadoop环境，配置好将配置好的hadoop文件复制到slave1、slave2中
6.启动集群并输入jps查看集群情况

---

Hadoop配置文件详解

hadoop-env.sh

添加jdk的路径，设置java主目录

yarn-env.sh

设置不同的日志文件位置

Mapred-env.sh

设置用于各种守护进程的jvm选项

core-site.xml

common属性配置

hadoop-tmp-dir

设置其他所有临时目录的根目录，如果hdfs-site.xml中不配置namenode和datanode的存放位置，默认就放在这个路径中

<property>
        <name>hadoop.tmp.dir</name>
        <value>/home/wxx/hadoop/tmp