文件系统 | HDFS | hdfs-site.xml |
计算 | MR | mapred-site.xml |
资源管理 | YARN | yarn-site.xml |
集群 | workers | |
core-site.xml |
(一)查看start-all.sh
[root@test4 sbin]# pwd
/opt/soft/hadoop313/sbin
[root@test4 sbin]# vim ./start-all.sh
- 启动服务
1、启动/关闭全部服务的命令
[root@test4 hadoop]# start-all.sh
[root@test4 hadoop]# stop-all.sh
2、启动/关闭文件系统datanodes、namenodes、secondary namenodes
[root@test4 hadoop]# start-dfs.sh
[root@test4 hadoop]# stop-dfs.sh
3、启动/关闭资源管理nodemanagers、resourcemanager
[root@test4 hadoop]# start-yarn.sh
[root@test4 hadoop]# stop-yarn.sh
4、单独启动某个服务(关闭stop同上)
[root@test4 hadoop]# hdfs --daemon start namenode
[root@test4 hadoop]# hdfs --daemon start datanode
[root@test4 hadoop]# hdfs --daemon start secondarynamenode
[root@test4 hadoop]# yarn --daemon start nodemanager
[root@test4 hadoop]# yarn --daemon start resourcemanager
- 上传文件
1、上传hellohadoop.txt文件
[root@test4 hadoop]# cd /opt/
[root@test4 opt]# ls
[root@test4 opt]# mkdir ./kb23tmp
[root@test4 opt]# cd ./kb23tmp/
[root@test4 kb23tmp]# vim ./hellohadoop.txt
[root@test4 kb23tmp]# hdfs dfs -put ./hellohadoop.txt /
- 上传本地文件mysql8到hdfs指定目录install下
[root@test4 /]# cd /opt/install
[root@test4 install]# hdfs dfs -mkdir /install
[root@test4 install]# hdfs dfs -put ./mysql-8.0.30-linux-glibc2.12-x86_64.tar.xz /install
- 查看连接数
[root@test4 install]# vim /opt/soft/hadoop313/etc/hadoop/hdfs-site.xml
(五)网页连接
(1)9870
|
|
(2)8088
|
|
(3)进入历史服务器19888 |
[root@kb129 shell]# mapred --daemon start historyserver
|
|