hadoop配置及集群的搭建

1. 安装centos7.0
   1.1 、配置VirtualBox
   
   
   

1.2 centos环境配置
关闭、禁用防火墙

systemctl stop firewalld
systemctl disable firewalld

配置网卡

vi /etc/sysconfig/network-scripts/ifcfg-enp0s3

修改

ifcfg-enp0s3   


BOOTPROTO=static

ONBOOT=yes

IPADDR=192.168.56.137

ifcfg-enp0s8

BOOTPROTO=dhcp

ONBOOT=yes

重启网络

systemctl restart network

生成密钥

ssh-keygen -t rsa -P “” 

cat /root/.ssh/id_rsa.pub >> /root/.ssh/authorized_keys

1.3、 配置主机名

vi /etc/hostname
Hadoop101（主机名）

使用这个命令会立即生效且重启也生效

hostnamectl set-hostname 主机名 

1.4、配置hosts

vi /etc/hosts
ip地址（192.168.137.101） 主机名（Hadoop101）

1.5、 配置JDK环境变量

export JAVA_HOME=/opt/jdk8
export JRE_HOME=/opt/jdk8/jre
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export PATH=$PATH:$JAVA_HOME/bin

2、配置hadoop
2.1、 配置Hadoop ./etc/hadoop目录下的文件
hadoop-env.sh

export JAVA_HOME=/opt/jdk8

core-site.xml

<configuration>

<property>

  <name>fs.defaultFS</name>

 
<value>hdfs://192.168