centos 7 安装并部署hadoop

 

本文是在虚拟机（已装好JAVA）中搭建，具体虚拟机安装 centos 7 可百度（也可后台留言，需求大我会单出一篇文章）

 

1、hadoop下载

下载地址：http://hadoop.apache.org/releases.html

我选择的是2.8.4， 下载 binary 版本

 

2、安装hadoop

移动到合适的目录使用 tar zxvf

 

3、配置hadoop

（1）、修改/home/ryan/hadoop/hadoop-2.8.4/etc/hadoop/hadoop-env.sh 文件的JAVA环境，将 JAVA 安装路径加进去并保存

 

（2）、位置hadoop环境变量

别忘了使用source ~/.bash_profile 使环境变量生效

 

（3）、修改hadoop安装目录下core-site.xml文件，我的路径为/home/ryan/hadoop/hadoop-2.8.4/etc/hadoop

 

修改hdfs-site.xml

 

4、hdfs启动与停止

 

第一次启动hdfs需要格式化，之后启动就不需要的：

 

5、关闭防火墙

 

6、启动hadoop

在浏览器中输入127.0.0.1:50070查看效果

停止命令为：./sbin/stop-dfs.sh

 

7、接下来配置yarn文件. 配置/home/ryan/hadoop/hadoop-2.8.4/etc/hadoop/mapred-site.xml    。这里注意一下，hadoop里面默认是mapred-site.xml.template 文件，如果配置yarn，把mapred-site.xml.template   重命名为mapred-site.xml 。如果不启动yarn，把重命名还原。

cp mapred-site.xml.template mapred-site.xml

然后修改该文件

 

配置相同路径下的yarn-site.xml文件

 

8 启动yarn

浏览器输入127.0.0.1:8088 会出现如下界面：

 

到此，hadoop初步搭建完成