linux系统，监控进程运行状态并自动重启崩溃后的进程的多种方法

系统进程运行异常崩溃后，自动重启的方法

有的公司，会写monitor守护进程，监视各个进程的运行状态，异常时，自动重启，但是这种，通过一个进程
监护一个进程的做法，不太完美，也是有崩溃的风险。

1、从硬件层面
一般大产品，如汽车，是不能完全依赖这种技术方案的，会外接一个mcu，来监控soc，通过soc发送心跳包，1
s发送一次，mcu能收到就soc还活着的信号，如果soc没有正常发送心跳包，说明soc已经挂掉，整个操作系统崩溃掉
mcu就可以通过，供电，给复位引脚一个电平信号，重启soc。

这种是针对整个soc，系统崩溃的方法。下面是软件层面，进程崩溃的重启方法。

1、看门狗技术
soc的内部是有看门狗的，可以通过看门狗，检测soc，某个进程是否卡死，跑飞，如果没有及时喂狗，说明程序异常，强制重启系统

2、通过脚本，监控进程，类似心跳包
这种就是init下，设置系统

init 守护进程是 Linux 内核执行的第一个进程，它的进程 ID (PID) 始终为 1。它的目的是初始化、管理和跟踪系统服务和守护进程。换句话说，init 守护进程是系统上所有进程的父进程。

要创建一个服务，需要编写 shell 脚本，并存储在 /etc/init.d/ 目录下，通过 service 命令启动、停止、重新启动服务。例如如下的 /etc/init.d/myservice

#!/bin/sh

MAXRSTCOUNT=5;
PROCTOGO=/mnt/hgfs/code/test/show

#count is the counter of test started times
count=0

sys_reboot()
{
    echo "system is going to reboot";
    reboot;
}

main_loop()
{
    while :
    do
    #########################################
    ProStillRunning=$(ps -aux |grep "${PROCTOGO}" |grep -v "grep")
    if [ -z "$ProStillRunning" ]; then
        #start test
        chmod +x ${PROCTOGO}
        ${PROCTOGO}
    fi

    #the running times counter
    let count=count+1
    echo "test running times is $count"

    #wait for test stoping...
    sleep 3

    #########################################
    done
}

main_loop;

etc/init.d/monitor-app.sh

#!/bin/bash
sleep 40

while [ 1 ]
do
        for procname in app
        do
                pgrep $procname > /dev/null
                if [ 0 -ne $? ]
                then
                        /etc/init.d/autoapp start &   ##autoapp可以是脚本，app等
                fi
        done
        sleep 30
done

etc/init.d/automhclient

#! /bin/sh
PATH=/sbin:/usr/sbin:/bin:/usr/bin

case "$1" in
    start)
        echo -n "Starting automhclient: "
                export DISPLAY=:0
                cd /usr/share/qt5/app/mhclient
                ./automhclient &
                echo
                exit 0
        ;;
    stop)
        echo -n "Shutting down automhclient: "
        killproc automhclient
        echo
        ;;
    restart)
        echo -n "Restarting automhclient: "
        $0 stop
        $0 start
        echo
        ;;
    *)
        echo "Usage: $0 start|stop" >&2
        exit 3
        ;;
esac

3、crontab

使用Linux的crontab和while循环配合pgrep和kill命令来监控并在进程崩溃时自动重启指定的进程。以下是一个简单的脚本示例，用于监控名为myprocess的进程，并在它崩溃时自动重启它：

#!/bin/bash
 
# 要监控的进程名
PROCESS_NAME="myprocess"
 
# 无限循环检查进程是否运行
while true; do
  # 使用pgrep查找进程
  PROCESS_ID=$(pgrep ${PROCESS_NAME})
  
  # 如果进程不存在，启动进程
  if [ -z "$PROCESS_ID" ]; then
    echo "${PROCESS_NAME} is not running. Starting it..."
    /path/to/${PROCESS_NAME} &
  fi
  
  # 暂停10秒钟，然后重新检查进程状态
  sleep 10
done

linux监控自动重启崩溃的进程
可以使用Linux的crontab和while循环配合pgrep和kill命令来监控并在进程崩溃时自动重启指定的进程。以下是一个简单的脚本示例，用于监控名为myprocess的进程，并在它崩溃时自动重启它：

#!/bin/bash
 
# 要监控的进程名
PROCESS_NAME="myprocess"
 
# 无限循环检查进程是否运行
while true; do
  # 使用pgrep查找进程
  PROCESS_ID=$(pgrep ${PROCESS_NAME})
  
  # 如果进程不存在，启动进程
  if [ -z "$PROCESS_ID" ]; then
    echo "${PROCESS_NAME} is not running. Starting it..."
    /path/to/${PROCESS_NAME} &
  fi
  
  # 暂停10秒钟，然后重新检查进程状态
  sleep 10
done

将上述脚本保存为一个文件，例如monitor.sh，并给予执行权限：

chmod +x monitor.sh

然后，使用crontab将其设置为随系统启动自动运行：
crontab -e
在打开的编辑器中添加以下行，使脚本在登录时自动运行：

@reboot /path/to/monitor.sh &
确保将/path/to/monitor.sh替换为脚本的实际路径。这样，即使进程崩溃，myprocess也会被自动重启。

4、systemd机制重启

systemd设置进程重启
在systemd中，如果你想要设置一个服务在崩溃时自动重启，你可以通过配置服务的Restart属性来实现。

编辑服务的systemd配置文件。这通常位于/etc/systemd/system/目录下，并且文件名通常与服务同名。

在配置文件中，找到[Service]部分，并添加或修改Restart属性。

例如，如果你想要让一个名为my-service.service的服务在崩溃时自动重启，你可以这样设置：

[Service]
Type=simple
Restart=always
ExecStart=/usr/bin/my-service

在这个例子中，Restart=always表示无论退出状态如何，服务都会尝试重启。

保存配置文件并退出编辑器。

重新加载systemd管理器配置，以确保新的设置生效：

sudo systemctl daemon-reload
如果服务正在运行，你可能需要停止并启动服务来应用新的重启策略：

sudo systemctl restart my-service.service
确保在应用这些更改之前理解服务的逻辑并考虑可能的副作用，例如，频繁的重启可能会导致系统资源耗尽。

6、monit或supervisor
/etc/init.d目录通常包含特定服务的启动脚本，这些脚本用于初始化（init）、启动、停止、重启或检查系统服务的状态。

要监控/etc/init.d中的自动重启程序，可以编写一个shell脚本或使用现有的监控工具，如monit或supervisor。以下是一个使用monit的示例：

安装monit：

sudo apt-get install monit
配置monit：

编辑/etc/monit/monitrc文件，添加对服务的监控配置。

check process my_service with pidfile /var/run/my_service.pid
start program = “/etc/init.d/my_service start”
stop program = “/etc/init.d/my_service stop”
if failed host 127.0.0.1 port 25 then restart
if 3 restarts within 5 cycles then timeout
启动monit：

sudo monit
monit将监控指定的进程或服务，并在它失败时自动重启。

确保替换my_service为你的服务名称，并调整if failed和重启策略以符合你的需求。

7、总结

还有一种方法，没有研究过，用到再说
系统关机时，systemed也好，init也好，会去关掉所有运行进程，说明系统对进程是一直监控状态的
ps -aux可以看到进程的运行状态，init是个守护进程，对僵死进程进行回收，那么肯定有种方法，可以重启进程
在rcS文件里，是可以设置重启的，具体怎么设置，无非那几个文件inittab，init.d，rcS