搭建单机版伪分布式Hadoop+Scala+spark

一.OpenJDK搭建

1.卸载删除自身openjdk

创建新用户，卸载jdk

2.安装JDK

[root@localhost software]# tar -zxvf jdk-8u152-linux-x64.tar.gz -C /usr/local/src3.配置Java变量

3.配置Java变量

配置文件位置： /etc/profile

末行添加如下两行内容（版本号相对应同上） source 使设置生效

4.检测JAVA是否可用

二.Hadoop搭建

1.解压安装

##将安装包解压到/usr/local/src/目录下

[root@localhost software]# tar -zxvf hadoop-2.7.1.tar.gz -C /usr/local/src/

2.配置Hadoop变量

(1).位置：/etc/profile

添加如下内容 并使环境生效

(2).位置：hadoop-env.sh 

修改如下 /usr/local/src/hadoop-2.7.1/etc/hadoop 中的 hadoop-env.sh 

export JAVA_HOME=/usr/local/src/jdk1.8.0_152

(3).配置 hdfs-site.xml 文件参数

(4).配置 core-site.xml 文件参数

(5).配置 mapred-site.xml文件参数

(6).配置 yarn-site.xml文件参数

3.访问50070