一、配置要求及准备工作
1.网卡配置
vi /etc/sysconfig/network-scripts/ifcfg-eth0
2.配置主机名
vi /etc/sysconfig/network
3.修改host映射
vi /etc/hosts
4.关闭防火墙
service iptables stop
以上配置修改好以后 如果嫌再创建虚拟机麻烦可以克隆(但是要记住克隆之后记得删除多余网卡)
5.免密登陆SSH
- 安装免密登录客户端:yum install -y openssh-clients
- 生成公钥跟私钥:ssh-keygen -t rsa
- 发送公钥跟私钥:ssh-copy-id hadoop01
6.jdk安装
1:把文件上传到linux
2: 解压文件到安装目录 tar -zxvf /root/jdk-8u102-linux-x64.tar.gz -C /usr/local/
3: 配置环境变量
4. vi /etc/profile
export JAVA_HOME=/usr/local/jdk1.8.0_102
export PATH=$PATH:$JAVA_HOME/bin
5.source /etc/profile
二、安装hadoop
1. HADOOP安装部署
最简化配置如下:
vi hadoop-env.sh
vi core-site.xml
vi hdfs-site.xml
mapred-site.xml ( 先执行:mv mapred-site.xml.template mapred-site.xml )
vi yarn-site.xml
vi slaves
三. 启动集群
1.初始化HDFS(在hadoop01进行操作)(操作一次就ok)
bin/hadoop namenode -format
2.启动HDFS
start-all.sh
启动完以后 jps 查看是否启动成功
去windows下去改变映射关系C/windows/system32/drivers/etc/hosts