2.hadoop运行环境搭建

Hadoop搭建

虚拟机的创建和配置，jdk的配置已经完成。

1 Hadoop安装

1）Hadoop下载

2）上传到我们的虚拟机：rz

3）解压

tar -zxvf hadoop-2.7.2.tar.gz -C /opt/module/

4）添加Hadoop到环境变量

sudo vim /etc/profile

#添加的内容
##HADOOP_HOME
export HADOOP_HOME=/opt/module/hadoop-2.7.2
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin

#重新编译，让profile文件生效
source /etc/profile

5）查看hadoop版本

hadoop version

2 Hadoop目录结构

重要目录：

• bin目录：存放对Hadoop相关服务（HDFS,YARN）进行操作的脚本
• etc目录：Hadoop的配置文件目录，存放Hadoop的配置文件
• lib目录：存放Hadoop的本地库（对数据进行压缩解压缩功能）
• sbin目录：存放启动或停止Hadoop相关服务的脚本
  本地库（对数据进行压缩解压缩功能）
• sbin目录：存放启动或停止Hadoop相关服务的脚本
• share目录：存放Hadoop的依赖jar包、文档、和官方案例