Hadoop运行环境搭建

目录

虚拟机环境准备

安装JDK

安装Hadoop

---

虚拟机环境准备

1 克隆虚拟机

[root@master-node ~]# vim /etc/udev/rules.d/70-persistent-net.rules     --修改克隆虚拟机网卡
# PCI device 0x8086:0x100f (e1000)
SUBSYSTEM=="net", ACTION=="add", DRIVERS=="?*", ATTR{address}=="00:0c:29:27:11:5c", ATTR{type}=="1", KERNEL=="eth*", NAME="eth0"
[root@master-node ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0     --修改网卡配置文件
DEVICE=eth0
HWADDR=00:0c:29:27:11:5c                                   --修改位上面ATTR{address}对应地址
TYPE=Ethernet
UUID=7b605ca9-9c59-4c35-89f8-0ad90f033e27
ONBOOT=yes                                                 --yes
NM_CONTROLLED=yes                                    
BOOTPROTO=static                                           --static
IPADDR=192.168.159.10                                      --修改位net局域网网段  
NETMASK=255.255.255.0
DNS2=192.168.159.2
GATEWAY=192.168.159.2                                      --修改位net局域网网关
DNS1=114.114.114.114
IPV6INIT=no
USERCTL=no
ARPCHECK=no                                                --添加

2 修改克隆虚拟机的静态IP

同上

3 修改主机名

[root@master-node ~]# vim /etc/sysconfig/network        --主机名修改（master-node）
NETWORKING=yes
HOSTNAME=master-node

4 关闭防火墙

[root@master-node ~]# service iptables status            --查看防火墙状态
[root@master-node ~]# service iptables stop              --关闭防火墙
[root@master-node ~]# chkconfig  iptables  --list        --查看防火墙开机启动状态
[root@master-node ~]# chkconfig  iptables  off           --关闭防火墙开机启动

5 创建普通用户（例如：yuezhengming）

[root@master-node ~]# useradd yuezhengming        --创建普通用户
[root@master-node ~]# passwd yuezhengming         --设置密码
[root@master-node ~]# id yuezhengming             --验证用户是否创建成功
uid=502(yuezhengming) gid=502(yuezhengming) 组=502(yuezhengming)
[root@master-node ~]# cat /etc/passwd
yuezhengming:x:502:502::/home/yuezhengming:/bin/bash

6 配置yuezhengming用户有root权限

[root@master-node ~]# vim /etc/sudoers                --普通用户设置root权限
## Allow root to run any commands anywhere 
root    ALL=(ALL)       ALL
yuezhengming    ALL=(ALL)       ALL

7 创建文件夹

   7.1 在/opt目录创建module，software文件夹

[yuezhengming@master-node ~]$ sudo mkdir /opt/module          --创建module文件夹
[yuezhengming@master-node ~]$ sudo mkdir /opt/software        --创建software文件夹

   7.2 修改module,software文件夹所有者

[yuezhengming@master-node ~]$ sudo chown yuezhengming:yuezhengming /opt/module/   /opt/software/
[yuezhengming@master-node ~]$ ll /opt/
总用量 24
drwxr-xr-x.  8 yuezhengming yuezhengming 4096 9月   1 07:09 module
drwxr-xr-x.  2 yuezhengming yuezhengming 4096 9月   1 07:06 software

安装JDK

[root@master-node software]# tar -zxvf jdk-8u211-linux-x64.tar.gz  -C /opt/module/
[root@master-node software]# vim /etc/profile
#Java配置
export JAVA_HOME=/opt/module/jdk1.8.0_211
export CLASSPATH=.:$JAVA_HOME/jre/lib/rt.jar:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export PATH=$JAVA_HOME/bin:$PATH
[root@master-node software]# source /etc/profile
[root@master-node software]# java -version

安装Hadoop

参考Hadoop集群搭建