hadoop的集群部署

目录:

1.配置Hadoop参数

2.修改脚本文件

3.拷贝Hadoop文件
4.格式化及启动
5.注意事项

内容:

1.配置Hadoop参数(切换到Hadoop的配置文件目录中)

01.编辑hadoop-env.sh配置文件并修改参数

02.编辑core-site.xml并修改参数

03.编辑mapred-site.xml并修改参数

04.编辑hdfs-site.xml并修改参数

05.编辑yarn-site.xml并修改参数

06.配置workers文件并修改参数

2.拷贝Hadoop文件

01.拷贝配置文件

02.创建软连接

3.修改脚本文件(如果使用root用户启动和停止需要修改如下配置,使用其他用户则不用配置如下配置)

01.编辑vim start-dfs.sh配置文件并修改参数

02.编辑vim stop-dfs.sh并修改参数

03.编辑vim start-yarn.sh修改参数

04.编辑vim stop-yarn.sh并修改参数

4.格式化及启动(格式化完成可以在Hadoop的目录下发现新建的logs和data文件夹)

01.集群格式化

02.集群启动

03.进程检测

5.注意事项

01.关闭防火墙

02.启动Hadoop集群前检查Hadoop所有的配置文件和环境安装

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值