Hadoop伪分布式环境配置/虚拟机配置Hadoop

我这里介绍一下用一台Windows电脑搭建linux虚拟机Hadoop平台。
需要用到的：Windows系统，虚拟机，centos系统，jdk，Hadoop。

这里我用的是老师给我们下发的，我直接给你们分享吧。
链接：https://pan.baidu.com/s/1EJA27lkPJe5Tn1VRoHi7yQ 提取码：1111

步骤开始：

步骤一修改网络地址：
先把虚拟机的网络适配器改成桥接模式，然后到虚拟机里面输入命令：ifconfig，查看网卡设备名称；我这里是eth3
修改/etc/sysconfig/network-scripts/ifcfg-eth0为上面查到的名称。

mv /etc/sysconfig/network-scripts/ifcfg-eth0 /etc/sysconfig/network-scripts/ifcfg-eth3

进入ifcfg-eth3,修改相应地址

DEVICE="eth3"  #这个地方要改成和文件名一样的
BOOTPROTO="static"
NM_CONTROLLED="yes"
ONBOOT="yes"
TYPE="Ethernet"
IPADDR=192.168.1.16  #此处的IP地址不能和主机一样，是和在主机同一网段下。
NETMASK=255.255.255.0
GATEWAY=192.168.1.1   #此处的网关是和主机的网关一样的。

保存退出，重启虚拟机网络’service network restart

步骤二配置jdk：
这个jdk我们已经下载好了，放在了/home/hadoop目录下。
我们先新建一个jdk要安装的目录，‘mkdir /usr/bin/jdk’
然后解压jdk放到这个目录下，‘tar zxvf /home/hadoop/jdk-8u151-linux-i586.tar.gz -C /usr/bin/jdk’
解压完毕后，我们把jdk的路径放进PATH环境里,在/etc/profile文件的最后添加下面两行

export JAVA_HOME=/usr/bin/jdk/jdk1.8.0_151
export PATH=$PATH:$JAVA_HOME/bin:/opt/hadoop/hadoop-2.8.1/bin:/opt/hadoop/hadoop-2.8.1/sbin

这里我为什么还要多加一些别的路径咧？因为呀，我们后面要安装hadoop的，现在先把路径一起加进去，省时间。
执行一下配置文件，使之生效，’. /etc/profile’或者’source /etc/profile’
此时我们可以查看jdk是否配置成功，命令：‘java -version’。出现Java版本号就表示安装成功了。

步骤三Hadoop环境配置：
新建hadoop安装目录，‘mkdir /opt/hadoop’
解压Hadoop文件到此目录，‘tar zxvf /home/hadoop/hadoop-2.8.1.tar.gz -C /opt/hadoop’
我们进入/opt/hadoop/hadoop-2.8.1/etc/hadoop路径，修改hadoop-env.sh文件，
修改第25行为下面的代码：

export JAVA_HOME=/usr/bin/jdk/jdk1.8.0_151

修改core-site.xml文件，在第19行和20行之间插入如下内容：

<property>
<name>fs.defaultFS</name>
<value>hdfs://192.168.1.16:9000/</value>
#这里IP地址需要修改为自己虚拟机配置的IP地址
</property>
<property>
<name>hadoop.temp.dir</name>
<value>/home/hadoop/hadoop/tmp/</value>
</property>

我们由于前面已经把路径加进PATH环境了，所以这里不用再加了。
然后格式化namenode，‘hadoop namenode -format’
我们开始启动hadoop：
‘hadoop-daemon.sh start namenode’
‘hadoop-daemon.sh start datanode’
我们使用’jps’查看一下进程，出现‘namenode，datanode这两个进程就表示成功。
我们关闭防火墙，’service iptables stop‘#这是临时关闭防火墙的命令。

步骤五：
浏览器输入配置的IP地址：192.168.1.16:50070 #这里IP是我的虚拟机IP

出现此页面就表示成功啦！恭喜你！
我的思维导图也送给你们：