安装和配置hadoop2.7.4集群

本文档详细介绍了如何在VMware虚拟机上使用CentOS-6.5搭建Hadoop2.7.4集群。首先,安装并配置JDK-1.8,接着将JDK安装文件复制到所有节点。然后,逐步修改hadoop的相关配置文件,包括core-site.xml、hdfs-site.xml、yarn-site.xml和slaves。最后,将配置文件和Hadoop程序复制到所有节点,并启动集群,通过50070端口验证安装成功。
摘要由CSDN通过智能技术生成

安装和配置Hadoop2.7.4集群 是基于VMware虚拟机软件,CentOS-6.5-x86_64-bin-DVD1.iso光盘映像文件,搭建的Linux系统集群

先安装并配置JDK-1.8
cd /opt/mysoft
tat -zxvf jdk-8u131-linux-x64.tar.gz//解压压缩包
mv jdk-8u131-linux-x64.tar.gz jdk//重命名
vi /etc/profile
添加 :

export  JAVA_HOME=/opt/mysoft/jdk
export   PATH=$PATH:$JAVA_HOME/bin:$PATH

source /etc/profile(使设置生效)
验证JDK
java -version
在这里插入图片描述
将JDK安装文件拷贝到qiku2,qiku3,qiku4中

scp  -r jdk/   qiku2:/opt/mysoft/
scp  -r jdk/   qiku3:/opt/mysoft/
scp  -r jdk/   qiku4:/opt/mysoft/

首先将Windows上的两个压缩包上传到虚拟机的/opt/mysoft/ 下
上传文件
第一步:

解压:tar -zxvf hadoop-2.7.4.tar.gz
重命名:mv hadoop-2.7.4 hadoop

第二步:

   cd /opt/mysoft/hadoop
   mkdir logs
   mkdir tmp
   mkdir   -p tmp/dfs/name
   mkdir   -p tmp/dfs/data

第三步:修改配置文件

cd  /opt/mysoft/hadoop/etc/hadoop
mv  mapred-site.xml.template  mapred-site.xml
vi mapred-site.xml
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值