centos7安装hadoop伪分布式系统(4)之04安装hadoop伪分布式集群

本文档详细介绍了在CentOS7上安装Hadoop伪分布式集群的步骤,包括配置环境变量、修改配置文件如core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xml和slaves,以及启动、测试和验证Hadoop集群的过程。
摘要由CSDN通过智能技术生成

1上传解压hadoop安装文件

配置env

/HADOOP:表示hadoop的安装文件

cd /home/hadoop/bigdater/hadoop/etc/hadoop

1.1修改hadoop文件夹etc下的hadoop-env.sh

export JAVA_HOME=${JAVA_HOME}改成export JAVA_HOME=/opt/jdk

添加

export HADOOP_PID_DIR=/home/hadoop/bigdater/hadoop/hdfs/tmp

1.2修改mapred-env.sh

添加

export HADOOP_MAPRED_PID_DIR=/home/hadoop/bigdater/hadoop/hdfs/tmp

1.3修改yarn-env.sh

添加

export YARN_PID_DIR=/home/hadoop/bigdater/hadoop/hdfs/tmp

2配置集群xml

2.1修改core-site.xml 

vi core-site.xml

<configuration> <property> <name>fs.defaultFS</name> <value>hdfs://hh:8020</value> </property>

<property> <name>hadoop.tmp.dir</name> <value>/home/hadoop/bigdater/hadoop/hdfs/tmp</value> </property> </configuration>

2.2配置hdfs-site.xml  

<configuration> <property&g

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值