安装和配置Hadoop2.7.4集群 是基于VMware虚拟机软件,CentOS-6.5-x86_64-bin-DVD1.iso光盘映像文件,搭建的Linux系统集群
先安装并配置JDK-1.8
cd /opt/mysoft
tat -zxvf jdk-8u131-linux-x64.tar.gz//解压压缩包
mv jdk-8u131-linux-x64.tar.gz jdk//重命名
vi /etc/profile
添加 :
export JAVA_HOME=/opt/mysoft/jdk
export PATH=$PATH:$JAVA_HOME/bin:$PATH
source /etc/profile(使设置生效)
验证JDK
java -version
将JDK安装文件拷贝到qiku2,qiku3,qiku4中
scp -r jdk/ qiku2:/opt/mysoft/
scp -r jdk/ qiku3:/opt/mysoft/
scp -r jdk/ qiku4:/opt/mysoft/
首先将Windows上的两个压缩包上传到虚拟机的/opt/mysoft/ 下
第一步:
解压:tar -zxvf hadoop-2.7.4.tar.gz
重命名:mv hadoop-2.7.4 hadoop
第二步:
cd /opt/mysoft/hadoop
mkdir logs
mkdir tmp
mkdir -p tmp/dfs/name
mkdir -p tmp/dfs/data
第三步:修改配置文件
cd /opt/mysoft/hadoop/etc/hadoop
mv mapred-site.xml.template mapred-site.xml
vi mapred-site.xml