使用shell脚本开启Hadoop、查看JPS服务

一、开启hadoop、yarn服务

(1)编写my_hadoop.sh文件，注意文件格式 ，上传到/opt/shell目录下

#!/bin/bash

##通过调用shell脚本时传入参数，用参数判断执行开启或者关闭命令

##1.判断调用shell脚本时是否传入参数 参数格式是否等于1
if [ $# -lt 1 ]
then
  echo "调用脚本时需要传入一个参数：start|stop"
  exit ;
fi


##2.判断传入的参数是start还是stop，根据参数的不同 对集群进行开启或者关闭
case $1 in
"start")
	  echo "-----------启动hadoop集群----------"
	  
	  echo "-----------启动hdfs-----------"
	  ssh bigdata02 "/opt/softs/hadoop3.1.3/sbin/start-dfs.sh"
	  
	  echo "-----------启动yarn-------------"
	  ssh bigdata04 "/opt/softs/hadoop3.1.3/sbin/start-yarn.sh"
	  
	  echo "-----------启动historyserver-------------"
	  
	  ssh bigdata04 "/opt/softs/hadoop3.1.3/bin/mapred --daemon start historyserver"
;;
"stop")
	  echo "-----------关闭hadoop集群----------"
	  
	  echo "-----------关闭hdfs-----------"
	  ssh bigdata02 "/opt/softs/hadoop3.1.3/sbin/stop-dfs.sh"
	  
	  echo "-----------关闭yarn-------------"
	  ssh bigdata04 "/opt/softs/hadoop3.1.3/sbin/stop-yarn.sh"
	  
	  echo "-----------关闭historyserver-------------"
	  
	  ssh bigdata04 "/opt/softs/hadoop3.1.3/bin/mapred --daemon stop historyserver"
;;
*)
	  echo "传入的参数异常，请检查"
;;
esac 

（2）配置/opt/softs/hadoop3.1.3/sbin下的 start-dfs.sh、stop-dfs.sh文件

--修改hadoop相关配置
HDFS_NAMENODE_USER=root
HDFS_DATANODE_USER=root
HDFS_SECONDARYNAMENODE_USER=root

--修改yarn相关配置
YARN_RESOURCEMANAGER_USER=root
YARN_NODEMANAGER_USER=root

--修改Hadoop配置
cd /opt/softs/hadoop3.1.3/sbin
vim start-dfs.sh
vim stop-dfs.sh

--修改后发送到另外两台机器上
scp start-dfs.sh root@bigdata03:/opt/softs/hadoop3.1.3/sbin/
scp start-dfs.sh root@bigdata04:/opt/softs/hadoop3.1.3/sbin/
scp stop-dfs.sh root@bigdata03:/opt/softs/hadoop3.1.3/sbin/
scp stop-dfs.sh root@bigdata04:/opt/softs/hadoop3.1.3/sbin/

--检查是否发送成功
cd /opt/softs/hadoop3.1.3/sbin
cat start-dfs.sh
cat stop-dfs.sh

--修改yarn配置
vim start-yarn.sh
vim stop-yarn.sh

--修改后发送到另外两台机器上
scp start-yarn.sh root@bigdata03:/opt/softs/hadoop3.1.3/sbin/
scp start-yarn.sh root@bigdata04:/opt/softs/hadoop3.1.3/sbin/
scp stop-yarn.sh root@bigdata03:/opt/softs/hadoop3.1.3/sbin/
scp stop-yarn.sh root@bigdata04:/opt/softs/hadoop3.1.3/sbin/

--检查是否发送成功
cd /opt/softs/hadoop3.1.3/sbin
cat start-yarn.sh
cat stop-yarn.sh

 

（3）运行shell文件 

cd /opt/shell/
sh my_hadoop.sh start
sh my_hadoop.sh stop

二、查看JPS服务

 （1）编写shell脚本，注意文件格式（linux），上传到/opt/shell目录下

#!/bin/bash

for hostname in bigdata02 bigdata03 bigdata04
do
	echo ----------$hostname---------------
	ssh $hostname /opt/softs/jdk1.8.0/bin/jps

done

（2） 执行shell脚本 

cd /opt/shell/
sh my_jps.sh