文章内容输出来源:拉勾教育大数据高薪训练营
注意:如果集群是第一次启动,需要在
Namenode
所在节点格式化
NameNode
,非第一次不用执行格
式化
Namenode
操作!!
hadoop
namenode
-format
格式化后创建的文件:
/opt/lagou/servers/hadoop-2.9.2/data/tmp/dfs/name/current
单节点启动
HDFS集群单节点启动
1、在centos7-1上启动NameNode
hadoop
-daemon
.sh
start
namenode
2、在centos7-1,centos7-2,centos7-3上分别启动DataNode
hadoop-daemon.sh start datanode
3、web端查看hdfs界面
查看
HDFS
集群正常节点:
注意:浏览器地址如果要使用服务器别名登录,需要在本地配置映射。不配置可以用ip地址加端口后访问。配置路径:C:\Windows\System32\drivers\etc目录下的hosts文件
YARN集群单节点启动
1、在centos7-3上开启resourcemanager,因为在之前说到的集群分配中是把resourcemanager分配到了centos7-3上。
yarn-daemon.sh start resourcemanager
2、分别在centos7-1和centos7-2上开启nodemanager
yarn-daemon.sh start nodemanager
集群群起
如果已经单节点方式启动了
Hadoop,
可以先停止之前的启动的
Namenode
与
Datanode
进程
,
如果
之前
Namenode
没有执行格式化,这里需要执行格式化
!!!!
1、在centos7-1集中启动hdfs集群
start-dfs.sh
2、在centos7-3中集中启动yarn集群
Hadoop集群启动停止命令汇总
各个服务组件逐一启动/停止
(
1
)分别启动
/
停止
HDFS
组件
hadoop-daemon.sh
start
/
stop
namenode / datanode / secondarynamenode
(
2
)启动
/
停止
YARN
yarn-daemon.sh
start
/
stop
resourcemanager / nodemanager
各个模块分开启动/停止(配置ssh是前提)常用
(1)整体启动/停止HDFS
start-dfs.sh / stop-dfs.sh
(
2
)整体启动
/
停止
YARN
start-yarn.sh / stop-yarn.sh