3.1 虚拟机环境准备
3.1.1 克隆虚拟机
第一步:提前预备好虚拟主机
3.1.2 修改克隆虚拟机的静态IP
第一步:修改Mac地址
[root@hadoop106 ~]#vim /etc/udev/rules.d/70-persistent-net.rules
第二步:修改IP地址
查看主机IP:[root@hadoop106 ~]#ifconfig
[root@hadoop106 ~]#vim /etc/sysconfig/network-scripts/ifcfg-eth0
IPADDR=172.16.245.106GATEWAY=172.16.245.2DNS1=172.16.245.2
3.1.3 修改主机名
[root@hadoop106 ~]#vim /etc/sysconfig/network修改为:HOSTNAME=hadoop106
3.1.4 关闭防火墙
1. 永久关闭SELinux
修改配置文件
[root@localhost ~]# vi /etc/selinux/config
将 SELINUX=enforcin改为 SELINUX=disabled
2.永久关闭防火墙
[root@localhost ~]# chkconfig iptables on //开启 [root@localhost ~]# chkconfig iptables off //关闭
3.1.5 创建普通用户
[root@hadoop106 ~]#useradd cc[root@hadoop106 ~]#ll /home/
[root@hadoop101 ~]# passwd cc
3.1.6 配置cc用户具有root权限
[root@hadoop106 ~]#vim /etc/sudoers
所有的修改完毕重启机器即可
[root@hadoop106 ~]#reboot
用客户端连接工具测试网络情况,可以ping通
因此到目前为止虚拟机克隆完全结束。
3.1.7 在/opt目录下创建文件夹
(1)在/opt目录下创建module、software文件夹
[cc@hadoop101 opt]$ sudo mkdir module[cc@hadoop101 opt]$ sudo mkdir software
(2)修改module、software文件夹的所有者cd
[cc@hadoop106 opt]$ sudo chown cc:cc module/ software/[sudo] password for cc: [cc@hadoop106 opt]$ ll总用量 8drwxr-xr-x 2 cc cc 4096 6月 22 04:45 moduledrwxr-xr-x 2 cc cc 4096 6月 22 04:45 software
3.2 安装JDK
卸载现有JDK
(1)查询是否安装Java软件:
[cc@hadoop106 opt]$ rpm -qa | grep javatzdata-java-2016c-1.el6.noarchjava-1.6.0-openjdk-1.6.0.38-1.13.10.4.el6.x86_64java-1.7.0-openjdk-1.7.0.99-2.6.5.1.el6.x86_64
(2)如果安装的版本低于1.7,卸载该JDK:
[cc@hadoop106 opt]$ sudo rpm -e java-1.6.0-openjdk-1.6.0.38-1.13.10.4.el6.x86_64[cc@hadoop106 opt]$ sudo rpm -e --nodeps java-1.7.0-openjdk-1.7.0.99-2.6.5.1.el6.x86_64[cc@hadoop106 opt]$ rpm -qa | grep javatzdata-java-2016c-1.el6.noarch[cc@hadoop106 opt]$ sudo rpm -e --nodeps tzdata-java-2016c-1.el6.noarch[cc@hadoop106 opt]$ rpm -qa | grep java[cc@hadoop106 opt]$
(3)查看JDK安装路径:
[cc@hadoop106 opt]$ which java/usr/bin/which: no java in (/usr/lib64/qt-3.3/bin:/usr/local/bin:/bin:/usr/bin:/usr/local/sbin:/usr/sbin:/sbin:/home/cc/bin)
上传Java安装包:
在Linux系统下的opt目录中查看软件包是否导入成功
[cc@hadoop106 software]$ ll总用量 374196-rwxr-xr-x 1 cc cc 197657687 6月 22 05:10 hadoop-2.7.2.tar.gz-rwxr-xr-x 1 cc cc 185515842 6月 22 05:09 jdk-8u144-linux-x64.tar.gz
解压JDK到/opt/module目录下
[cc@hadoop106 software]$ tar -zxvf jdk-8u144-linux-x64.tar.gz -C /opt/module/
配置JDK环境变量
(1)先获取JDK路径
[cc@hadoop106 software]$ cd /opt/module/jdk1.8.0_144/[cc@hadoop106 jdk1.8.0_144]$ pwd/opt/module/jdk1.8.0_144
(2)打开/etc/profile文件
[cc@hadoop106 software]$ sudo vi /etc/profile
在profile文件末尾添加JDK路径
#JAVA_HOMEexport JAVA_HOME=/opt/module/jdk1.8.0_144export PATH=$PATH:$JAVA_HOME/bin
(3)保存后退出
:wq
(4)让修改后的文件生效
[cc@hadoop101 jdk1.8.0_144]$ source /etc/profile
[cc@hadoop106 jdk1.8.0_144]$ java -versionjava version "1.8.0_144"Java(TM) SE Runtime Environment (build 1.8.0_144-b01)Java HotSpot(TM) 64-Bit Server VM (build 25.144-b01, mixed mode)
3.3 安装Hadoop
(1)Hadoop下载地址:
https://archive.apache.org/dist/hadoop/common/hadoop-2.7.2/
(2)用工具将hadoop-2.7.2.tar.gz导入到opt目录下面的software文件夹下面
(3)进入到Hadoop安装包路径下
[cc@hadoop106 ~]$ cd /opt/software/
(3)解压安装文件到/opt/module下面
[cc@hadoop106 software]$ tar -zxvf hadoop-2.7.2.tar.gz -C /opt/module/
3. 查看是否解压成功
[cc@hadoop106 software]$ ls /opt/module/hadoop-2.7.2
(4)将Hadoop添加到环境变量
- 获取Hadoop安装路径
[cc@hadoop106 hadoop-2.7.2]$ pwd/opt/module/hadoop-2.7.2
- 打开/etc/profile文件
[cc@hadoop106 hadoop-2.7.2]$ sudo vi /etc/profile
在profile文件末尾添加JDK路径:(shitf+g)
##HADOOP_HOMEexport HADOOP_HOME=/opt/module/hadoop-2.7.2export PATH=$PATH:$HADOOP_HOME/binexport PATH=$PATH:$HADOOP_HOME/sbin
- 保存后退出
:wq
- 让修改后的文件生效
[cc@hadoop106 hadoop-2.7.2]$ source /etc/profile
- 测试是否安装成功
[cc@hadoop106 hadoop-2.7.2]$ hadoop versionHadoop 2.7.2
3.4 Hadoop目录结构
3.4.1 查看Hadoop目录结构
[cc@hadoop106 hadoop-2.7.2]$ ll总用量 52drwxr-xr-x 2 cc cc 4096 5月 22 2017 bindrwxr-xr-x 3 cc cc 4096 5月 22 2017 etcdrwxr-xr-x 2 cc cc 4096 5月 22 2017 includedrwxr-xr-x 3 cc cc 4096 5月 22 2017 libdrwxr-xr-x 2 cc cc 4096 5月 22 2017 libexec-rw-r--r-- 1 cc cc 15429 5月 22 2017 LICENSE.txt-rw-r--r-- 1 cc cc 101 5月 22 2017 NOTICE.txt-rw-r--r-- 1 cc cc 1366 5月 22 2017 README.txtdrwxr-xr-x 2 cc cc 4096 5月 22 2017 sbindrwxr-xr-x 4 cc cc 4096 5月 22 2017 share[cc@hadoop106 hadoop-2.7.2]$
3.4.2 重要目录
(1)bin目录:存放对Hadoop相关服务(HDFS,YARN)进行操作的脚本
(2)etc目录:Hadoop的配置文件目录,存放Hadoop的配置文件
(3)lib目录:存放Hadoop的本地库(对数据进行压缩解压缩功能)
(4)sbin目录:存放启动或停止Hadoop相关服务的脚本
(5)share目录:存放Hadoop的依赖jar包、文档、和官方案例
最后附上本章思维导图方便读者记忆
思维导图下载链接:
链接: https://pan.baidu.com/s/1q2XHKkwujGcEjGB3bAMnGA 密码: g2h4
如果失效请私信我,在学习中遇到问题私信我。