【Shell脚本编程（八）】大型脚本开发实战

最新推荐文章于 2022-10-18 00:39:19 发布
最新推荐文章于 2022-10-18 00:39:19 发布
阅读量536 收藏 2
点赞数
分类专栏： Linux 文章标签： Shell脚本编程
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/houwanle/article/details/104596025
版权

1. 脚本工具功能概述

需求描述：

  1. 实现一个脚本工具，该脚本提供类似supervisor功能，可以对进程进行管理；
  2. 一键查看所有进程运行状态；
  3. 单个或批量启动进程，单个或批量停止进程；
  4. 提供进程分组功能，可以按组查看进程运行状态，可以按组启动或停止该组内所有进程；

2. 拆分脚本功能，抽象函数

  1. function get_all_process 返回进程名称列表字符串"nginx httpd mysql datanode"
  2. function get_all_group 返回进程组列表字符串
  3. function get_process_info（该函数可以接收一个参数，参数为进程名称） 返回进程详细信息列表字符串，详细信息包括：运行状态、PID、CPU、MEM、启动时间
  4. function get_all_process_by_group 返回进程组内的所有进程名称列表字符串
例子：DB组--> "mysql postgresql oracle"

3. 功能函数

  • process.cfg
[GROUP_LIST]
WEB
DB
HADOOP
YARN

[WEB]
nginx
httpd

[DB]
mysql
postgresql
oracle

[HADOOP]
datanode
namenode
journalnode

[YARN]
resourcemanager
nodemanager

[nginx]
description="Web Server 1"
program_name=tail
parameter=-f /root/lesson/9.1/tmp/web-nginx.conf

[httpd]
description="Web Server 2"
program_name=tail
parameter=-f /root/lesson/9.1/tmp/web-httpd.conf

[mysql]
description="High Performance DataBase"
program_name=tail
  1. function get_all_group 返回进程组列表字符串
vim app_status.sh

#!/bin/bash
#
# Func: Get Porcess Status In process.cfg

# Define Variables
HOME_DIR="/root/lesson/9.1"
CONFIG_FILE="process.cfg"

function get_all_group
{
    if [ -e $HOME_DIR/$CONFIG_FILE ];then
        echo "$CONFIG_FILE is not exist..Please Check.."
        exit 1
    else
        G_LIST=`sed -n '/\[GROUP_LIST\]/,/\[.*\]/p' process.cfg | egrep -v "(^$|\[.*\])" `
        echo "$G_LIST"
    fi
}

groups=`get_all_group`

echo $groups
  1. function get_all_process 返回进程名称列表字符串
  2. function get_process_info（注：该函数可以接收一个参数，参数为进程名称） 返回进程详细信息列表字符串，详细信息包括：运行状态、PID、CPU、MEM、启动时间
  3. function get_all_process_by_group 返回进程组内的所有进程名称列表字符串（例子：DB组–> “mysql postgresql oracle”
vim app_status.sh

#!/bin/bash
#
# Func: Get Porcess Status In process.cfg

# Define Variables
HOME_DIR="/root/lesson/9.1"
CONFIG_FILE="process.cfg"
this_pid=$$

function get_all_group
{
    G_LIST=`sed -n '/\[GROUP_LIST\]/,/\[.*\]/p' $HOME_DIR/$CONFIG_FILE | egrep -v "(^$|\[.*\])" `
    echo "$G_LIST"
}

function get_all_process
{
    for g in `get_all_group`
    do
        P_LIST=`sed -n "/\[$g\]/,/\[.*\]/p" $HOME_DIR/$CONFIG_FILE | egrep -v "(^$|\[.*\])"`
        echo "$P_LIST"
    done
}

function get_process_pid_by_name #process_name
{
    if [ $# -ne 1 ];then
        return 1
    else
        pids=`ps -ef | grep $1 | grep -v grep | grep -v $0 | awk '{print $2}'`
        echo $pids
    fi
}

function get_process_info_by_pid #process_pid
{
    num=1
    if [ `ps -ef | awk -v pid=$1 '$2==pid{print }' | wc -l` -eq 1 ];then
        pro_status="RUNNING"
    else
        pro_status="STOPED"
    fi
    pro_cpu=`ps aux | awk -v pid=$1 '$2==pid{print $3}'`
    pro_mem=`ps aux | awk -v pid=$1 '$2==pid{print $4}'`
    pro_start_time=`ps -p $1 -o lstart | grep -v STARTED`
}

function is_group_in_config
{
    for gn in `get_all_group`;do
        if [ $gn == $1];then
            return
        fi
    done
    return 1
}

function get_all_process_by_group
{
    is_group_in_config $1
    if [ $? -eq 0 ];then
        p_list=`sed -n "/\[$1\]/,/\[.*\]/p" $HOME_DIR/CONFIG_FILE | egrep -v "(^$|^#|\[.*\])"`
        echo $p_list
    else
        echo "GroupName $1 is not in process.cfg"
    fi
}

if [ !-e $HOME_DIR/$CONFIG_FILE ];then
    echo "$CONFIG_FILE is not exist..please check.."
    exit 1
fi

4. 程序主流程设计

./app_status.sh 执行有三种情况：

  1. 无参数 列出配置文件中所有进程的运行信息
  2. -g GroupName 列出GroupName组内的所有进程
  3. process_name1 列出指定进程的运行信息
#说明：该函数无需输入任何参数；返回配置文件 process.cfg中所有的组信息，例如WEB、DB等
function get_all_group

#说明：该函数无需输入任何参数；返回配置文件 process.cfg 中所有的进程信息。
function get_all_process

#说明：该函数接收一个参数，参数为进程名称；返回值是一个PID的列表，可能有一个PID，也可能有多个
function get_process_pid_by_name

#说明：该函数接收一个参数，参数为进程PID；返回值是一个进程运行信息的列表，列表包含运行状态、CPU占用率、内存占用率、进程启动时间
function get_process_info_by_pid

#说明：该函数接收一个参数，参数为组的名称；返回值是0或1，0代表该组在配置文件中，1代表该组不在配置文件中
function is_group_in_config

#说明：该函数接受一个参数，参数为组名称；返回值是对应组内的所有进程名称列表
function get_all_process_by_group

#说明：该函数接收一个参数，参数是一个进程名称；返回值是一个组名
function get_group_by_process_name

#说明：该函数接收两个参数，第一个参数为process_name，第二个参数为组名称；返回值是针对每一个进程PID的运行信息
funcion format_print

#说明：该函数接收一个参数，参数为进程名称；返回值是0或1，0代表该进程在配置文件中，1代表进程不在配置文件中
function is_process_in_config

vim app_status.sh

#!/bin/bash
#
# Func: Get Porcess Status In process.cfg

# Define Variables
HOME_DIR="/root/lesson/9.1"
CONFIG_FILE="process.cfg"
this_pid=$$

function get_all_group
{
    G_LIST=`sed -n '/\[GROUP_LIST\]/,/\[.*\]/p' $HOME_DIR/$CONFIG_FILE | egrep -v "(^$|\[.*\])" `
    echo "$G_LIST"
}

function get_all_process
{
    for g in `get_all_group`
    do
        P_LIST=`sed -n "/\[$g\]/,/\[.*\]/p" $HOME_DIR/$CONFIG_FILE | egrep -v "(^$|\[.*\])"`
        echo "$P_LIST"
    done
}

function get_process_pid_by_name #process_name
{
    if [ $# -ne 1 ];then
        return 1
    else
        pids=`ps -ef | grep $1 | grep -v grep | grep -v $0 | awk '{print $2}'`
        echo $pids
    fi
}

function get_process_info_by_pid #process_pid
{
    num=1
    if [ `ps -ef | awk -v pid=$1 '$2==pid{print }' | wc -l` -eq 1 ];then
        pro_status="RUNNING"
    else
        pro_status="STOPED"
    fi
    pro_cpu=`ps aux | awk -v pid=$1 '$2==pid{print $3}'`
    pro_mem=`ps aux | awk -v pid=$1 '$2==pid{print $4}'`
    pro_start_time=`ps -p $1 -o lstart | grep -v STARTED`
}

function is_group_in_config
{
    for gn in `get_all_group`;do
        if [ $gn == $1];then
            return
        fi
    done
    echo "Group $1 is not in process.cfg"
    return 1
}

function is_process_in_config
{
    for pn in `get_all_process`;do
        if [ $pn == $1];then
            return
        fi
    done
    echo "Process $1 is not in process.cfg"
    return 1
}

function get_all_process_by_group
{
    is_group_in_config $1
    if [ $? -eq 0 ];then
        p_list=`sed -n "/\[$1\]/,/\[.*\]/p" $HOME_DIR/CONFIG_FILE | egrep -v "(^$|^#|\[.*\])"`
        echo $p_list
    else
        echo "GroupName $1 is not in process.cfg"
    fi
}

function get_group_by_process_name
{
    for gn in `get_all_group`;do
        for pn in `get_all_process_by_group $gn`;do
            if [ $pn == $1 ];then
                echo "$gn"
            fi
        done
    done
}

function format_print
{
    ps -ef | grep $1 | grep -v grep | grep -v $this_pid &> /dev/null
    if [ $? -eq 0 ];then
        pids=`get_process_pid_by_name $1`
        for pid in $pids;do
            get_process_info_by_pid $pid
            awk -v p_name=$1 \
                -v g_name=$2 \
                -v p_status=$pro_status \
                -v p_pid=$pid \
                -v p_cpu=$pro_cpu \
                -v p_mem=$pro_mem \
                -v p_start_time="$pro_start_time" \
                'BEGIN{printf "%-10s%-12s%-5s%-5s%-5s%-5s%-15s\n",p_name,g_name,p_status,p_pid,p_cpu,p_mem,p_start_time}'
        done
    else
        awk -v p_name=$1 -v g_name=$2 'BEGIN{printf "%-10s%-12s%-5s%-5s%-5s%-5s%-15s\n",p_name,g_name,"STOPED","NULL","NULL","NULL","NULL"}'
    fi
}

awk 'BEGIN{printf "%-20s%-10s%-10s%-6s%-7s%-10s%-20s\n","ProcessName---------","GroupName---","Status----","PID---","CPU----","MEMORY----","StartTime---"}'

if [ $# -gt 0 ];then
    if [ "$1" == "-g" ];then
        shift
        for gn in $@;do
            is_group_in_config $gn || continue
            for pn in `get_all_process_by_group $gn`;do
                is_process_in_config $pn && format_print $pn $gn
            done
        done
    else
        for pn in $@;do
            gn=`get_group_by_process_name $pn`
            is_process_in_config $pn && format_print $pn $gn
        done
    fi
else
    for pn in `get_all_process`;do
        gn=`get_group_by_process_name $pn`
        is_process_in_config $pn && format_print $pn $gn
    done
fi
红枫忆梦
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
PSD大文件优化脚本
04-20
打开大型PSD文件的时候，在PS里 文件-脚本-浏览 中选择这个脚本，然后保存。即可优化PSD文件打开速度
大数据常用Shell脚本（一）
weixin_43646427的博客
09-14 508
一、系统变量 $HOME $USER $PWD $SHELL 二、自定义变量 定义变量（a=2），变量名由数字、字母、下划线； 1.1 环境变量名建议用大写字母，JAVA_HOME 1.2 等号两侧不能有空格 1.3 变量默认都是字符串，无法直接进行数值运算 1.4 变量的值有空格，建议用双引号 撤销变量（unset a） 声明静态变量（readonly a=2），不能被撤销 # 1、定义普通变量，输出1 a=1 echo $a # 2、撤销变量，输出为空 unset a echo $a # 3、定义
运维朱工大脚本集合（常见服务一键部署，系统资源一键查看）
笨办法学linux的博客
01-19 4495
目前正在写一个大脚本，之所以称之为大，其实只是想写一个综合性的脚本。目前写的是**第一版本（v1）**，主要是功能实现，里面还有许多优化的地方，希望一起学习探讨。
Shell编程—【10】大型脚本开发实战
qq_26769049的博客
04-19 356
1. 脚本工具功能概述 需求描述： 实现一个脚本工具，该脚本提供类似supervisor功能，可以对进程进行管理； 一键查看所有进程运行状态； 单个或批量启动进程，单个或批量停止进程； 提供进程分组功能，可以按组查看进程运行状态，可以按组启动或停止该组内所有进程； 2. 拆分脚本功能，抽象函数 function get_all_process 返回进程名称列表字符串"nginx httpd mysql datanode" function get_all_group 返回进程组列表字符串 functi
shell 大型脚本工具开发实战
weixin_30535043的博客
07-14 259
拆分脚本功能，抽象函数 1、function get_all_group 返回进程组列表字符串 2、function get_all_process 返回进程名列表字符串"nginx httpd mysql datanode" 3、function get_process_info 返回进程详细信息列表字符串，详细信息包括：运行状态、PID、CPU、MEM、启动时间 注：...
第七课 Shell脚本编程-大型脚本工具开发实战
QnHyn
10-18 451
shell
shell脚本编程100例
10-01
《shell脚本编程100例》为读者提供了100个实战性的shell脚本编程实例，涵盖了多个方面的shell脚本编程知识，读者可以通过学习这些实例，掌握shell脚本编程的技术，实现自动化系统管理和数据处理。
SHELL脚本编程实战手册
03-17
SHELL脚本编程实战手册讲解 内容包含： 1、编程基础 2、shell脚本语言基本结构 3、bash的配置文件 4、流程控制 5、函数介绍 6、其他脚本相关工具 7、数组 8、字符串处理 9、高级变量
shell编程实战–服务启动脚本的编写
01-07
一、源码安装nginx [root@localhost Desktop]# tar zxf nginx-1.17.8.tar.gz [root@localhost Desktop]# ls nginx-1.17.8 nginx-1.17.8.tar.gz 解决依赖性： yum install -y gcc openssl-devel pcre-devel ...
Shell 脚本编程实战100例.pdf
04-02
从提供的文件内容来看，这是一本关于Shell脚本编程的实战教程书籍，以实例的方式教授读者如何使用Shell脚本来完成各种Linux系统运维任务。下面将详细介绍从给出的内容中能够总结出的一些Shell脚本编程知识点。 首先...
Linux Shell脚本自动化编程实战.zip
最新发布
05-14
第1章__Shell能做什么 第2章__Shell变量精讲 第3章__条件测试及流程控制 第4章__循环及并发控制 第5章__非交互式expect 第6章__数组应用实战 第7章__函数传参及返回 第8章__Shell内置命令 第9章__RE正则表达式 第10...
shell脚本大集锦
weixin_56667320的博客
07-05 226
剪刀石头布人机对战 代码如下： vim r.sh #!/bin/bash echo -e "\e[35m人机对战开始\e[0m" read -p "剪刀:0 石头:1 步:2 请出拳(选择数字0-2): " num com=`expr $RANDOM % 3` case $num in [0]) if [ $com -eq 0 ];then echo "平局" elif [ $com -eq 2 ];then
8个实战及常用Shell脚本编写
ForeverDirect的博客
10-02 7533
注意事项： 1).开头加解释器:#!/bin/bash 2).语法缩进，使用四个空格，多加注释说明 3).命名建议规范:变量名大写，局部变量小写,函数名小写 4).默认变量是全局的，函数中使用local指定局部变量 5).调试脚本两个命令:set -e遇到执行非0时退出脚本,set -x打印执行过程 6).一定要先测试，在加入到工程中 1.获取随机字符串或数字 获取随机8位字符串 获取随机8位数...
Shell脚本（）
BigData
04-20 169
网址：https://blog.csdn.net/wojiushiwo987/category_9268186.html
大数据之玩转shell脚本一
Jaserok的博客
12-18 1284
1.创建 1.1格式 1.2打印一句话www.ruozedata.com到shell脚本（封装一句话到shell) 1.3执行刚刚封装的shell脚本 抛错，因为没权限，修改权限 1.3.1用sh命令执行，不需要修改权限 sh -x 是调试模式 系统自带的命令 2.定义变量及引用 先创建 定义：k=v (定义的时候=前后没有空格） rz=“www.ruozedata.com”...
Shell 脚本大全(收藏好)
ytp552200ytp的博客
08-24 1777
1、检测两台服务器指定目录下的文件一致性 #!/bin/bash ###################################### 检测两台服务器指定目录下的文件一致性 ##################################### #通过对比两台服务器上文件的md5值，达到检测一致性的目的 dir=/data/web b_ip=192.168.88.10 #将指定目录下的文件全部遍历出来并作为md5sum命令的参数，进而得到所有文件的md5值，并写入到指定文件中 find$d.
9 个实用 shell 脚本，建议收藏！
码农code之路
03-14 679
今天给大家分享9个实用的Shell脚本，建议收藏！需要的时候可以直接拿出来用！Dos 攻击防范（自动屏蔽攻击 IP）#!/bin/bash DATE=$(date+%d/%b/%Y:%H...
SqlServer 执行较大脚本时的解决方案
jinlingjjl的专栏
04-17 1320
当我们需要在SQLServer数据库里面执行一个比较大的文件(比如1GB)时，会发现数据库根本无法加载该脚本文件，原因是因为查询分析器只能执行100M以内的文件，所以脚本过大就会造成内存溢出。下面是具体的解决方法：1.Win+R 输入CMD；2.输入如下格式的命令osql -S 127.0.0.1 -U sa -P 123456 -i D:\MyTest.sql其中127.0.0.1是数据库服务器...
Shell脚本编程实战指南：100个经典实例
《Shell脚本编程100例》是一本集合了大量实用Shell脚本知识的宝典，适合学习者、进阶工程师以及面试准备者使用，无论是在日常工作还是个人技能提升中都极具价值。本书围绕Linux Shell编程基础展开，共涵盖100个实例...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值