hadoop3.1.3分布式集群搭建

本文详细介绍了在centos6.10环境下,如何利用jdk1.8和zookeeper3.4.5搭建Hadoop3.1.3的分布式集群。包括配置免密登录、创建必要文件夹、修改系统配置、配置Hadoop相关XML文件,以及启动和验证Hadoop集群的过程。
摘要由CSDN通过智能技术生成

环境准备:
jdk1.8
centos6.10
zookeeper3.4.5
三台服务器免密登录配置完成(此处省略步骤)

1、上传Hadoop3.1.3安装包并解压
这里我是安装在/usr/local 这个路径下

解压:tar -zxvf /usr/local/hadoop-3.1.3.tar.gz

2、首先提前创建好需要的文件夹

mkdir -p /usr/local/hadoop/data
mkdir -p /usr/local/hadoop/dfs
mkdir -p /usr/local/hadoop/tmp

3、vi /etc/profile
配置hadoop的安装路径

export HADOOP_HOME=/usr/local/hadoop-3.1.3
export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

source /etc/profile 才会生效

4、vi /etc/hosts
配置三台服务器的主机名和ip

192.168.130.28   myhbase
192.168.130.29   xmhl
192.168.130.30   xmhl30

5、vi core-site.xml

<configuration>

<property>
	<name>fs.defaultFS</name>
	<value>hdfs://xmhl:9000<
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值