Shell常用脚本:hadoop集群启动、停止、重启、查看进程脚本

本文介绍了一个用于Hadoop集群管理的bash脚本,支持启动、停止、重启Hadoop服务以及查看各节点Java进程。脚本通过SSH实现免密登录并自动执行Hadoop相关命令。
摘要由CSDN通过智能技术生成

脚本

脚本内容以我搭建的hadoop集群为例,你们自用的时候自行根据你们的情况进行修改即可


hadoop-cluster-manager.sh

#!/bin/bash
# 1. 调用此脚本前,请使用ssh-keygen -t rsa、ssh-copy-id -f 目标机器这两个命令使得目标机器是免密登录的
# 2. ssh远程执行的命令,不会加载/etc/profile里面的全局变量,故需要手动执行


if [ $# -lt 1 ]; then

  echo "入参为空 == 请输入参数:start/stop/restart/jps中的一个";
  exit 1;
fi


case $1 in


"start")

  echo "集群启动中....."

  ssh root@hadoop107  'source /etc/profile && bash  /opt/module/hadoop-3.3.6/sbin/start-dfs.sh'
  echo "由【hadoop107】启动dfs集群组件"
  ssh root@hadoop108  'source /etc/profile && bash /opt/module/hadoop-3.3.6/sbin/start-yarn.sh'
  echo "由【hadoop108】启动yarn集群组件"
  ssh root@hadoop107  'source /etc/profile && /opt/module/hadoop-3.3.6/bin/mapred --daemon start historyserver'
  echo "由【hadoop107】启动日志聚集组件"

  echo "集群启动完成"

;;


"stop")


  echo "集群停止中....."

  ssh root@hadoop107  'source /etc/profile && bash  /opt/module/hadoop-3.3.6/sbin/stop-dfs.sh'
  echo -e "由【hadoop107】关闭dfs集群组件"
  ssh root@hadoop108  'source /etc/profile && bash /opt/module/hadoop-3.3.6/sbin/stop-yarn.sh'
  echo -e "由【hadoop108】关闭yarn集群组件"
  ssh root@hadoop107  'source /etc/profile && /opt/module/hadoop-3.3.6/bin/mapred --daemon stop historyserver'
  echo -e "由【hadoop107】关闭日志聚集组件"

  echo "集群停止完成"

;;



"restart")

  echo "集群重启中....."

  ssh root@hadoop107  'source /etc/profile && bash  /opt/module/hadoop-3.3.6/sbin/stop-dfs.sh'
  echo "由【hadoop107】关闭dfs集群组件"
  ssh root@hadoop108  'source /etc/profile && bash /opt/module/hadoop-3.3.6/sbin/stop-yarn.sh'
  echo "由【hadoop108】关闭yarn集群组件"
  ssh root@hadoop107  'source /etc/profile && /opt/module/hadoop-3.3.6/bin/mapred --daemon stop historyserver'
  echo "由【hadoop107】关闭日志聚集组件"



  ssh root@hadoop107  'source /etc/profile && bash  /opt/module/hadoop-3.3.6/sbin/start-dfs.sh'
  echo "由【hadoop107】启动dfs集群组件"
  ssh root@hadoop108  'source /etc/profile && bash /opt/module/hadoop-3.3.6/sbin/start-yarn.sh'
  echo "由【hadoop108】启动yarn集群组件"
  ssh root@hadoop107  'source /etc/profile && /opt/module/hadoop-3.3.6/bin/mapred --daemon start historyserver'
  echo "由【hadoop107】启动日志聚集组件"



  echo "集群重启完成"

;;


"jps")


  echo -e "查看集群Java进程中.....\n"

  ssh root@hadoop107  'source /etc/profile && jps'
  echo -e "查看【hadoop107】进程结束\n\n"

  ssh root@hadoop108  'source /etc/profile && jps'
  echo -e "查看【hadoop108】进程结束\n\n"

  ssh root@hadoop109  'source /etc/profile && jps'
  echo -e "查看【hadoop109】进程结束\n\n"


  echo "查看集群Java进程结束"




;;

*)

echo "无效参数 == 请输入参数:start/stop/restart/jps中的一个";

;;

esac





在这里插入图片描述

在这里插入图片描述

交流群(内置机器人供大家娱乐)

在这里插入图片描述

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值