Hadoop 运行环境的搭建

Hadoop运行环境搭建

1. 克隆虚拟机

2. 修改克隆虚拟机的静态IP

3. 修改主机名

4. 关闭防火墙

5. 创建root用户

6. 配置root用户具有root权限
   7．在/opt目录下创建文件夹

7. 卸载现有JDK
   （1）查询是否安装Java软件：
   [root@hadoop101 opt]$ rpm -qa | grep java
   （2）如果安装的版本低于1.7，卸载该JDK：
   [root@hadoop101 opt]$ sudo rpm -e 软件包
   （3）查看JDK安装路径：
   [root@hadoop101 ~]$ which java

8. 用SecureCRT工具将JDK导入到opt目录下面的software文件夹下面
   1.在Linux系统下的opt目录中查看软件包是否导入成功
   [root@hadoop101 opt]$ cd software/
   [root@hadoop101 software]$ ls
   hadoop-2.7.2.tar.gz jdk-8u144-linux-x64.tar.gz
   2.解压JDK到/opt/module目录下
   [root@hadoop101 software]$ tar -zxvf jdk-8u144-linux-x64.tar.gz -C /opt/module/

9. 配置JDK环境变量
   （1）先获取JDK路径
   [root@hadoop101 jdk1.8.0_144]$ pwd
   /opt/module/jdk1.8.0_144
   （2）打开/etc/profile文件
   [root@hadoop101 software]$ sudo vi /etc/profile
   在profile文件末尾添加JDK路径
   #JAVA_HOME
   export JAVA_HOME=/opt/module/jdk1.8.0_144
   export PATH=$PATH:$JAVA_HOME/bin
   （3）保存后退出
   :wq
   （4）让修改后的文件生效
   [root@hadoop101 jdk1.8.0_144]$ source /etc/profile

10. 测试JDK是否安装成功
    [root@hadoop101 jdk1.8.0_144]# java -version
    java version “1.8.0_144”
    注意：重启（如果java -version可以用就不用重启）
    [root@hadoop101 jdk1.8.0_144]$ sync
    [root@hadoop101 jdk1.8.0_144]$ sudo reboot

（1）bin目录：存放对Hadoop相关服务（HDFS,YARN）进行操作的脚本
（2）etc目录：Hadoop的配置文件目录，存放Hadoop的配置文件
（3）lib目录：存放Hadoop的本地库（对数据进行压缩解压缩功能）
（4）sbin目录：存放启动或停止Hadoop相关服务的脚本
（5）share目录：存放Hadoop的依赖jar包、文档、和官方案例