服务器java线程监控_Zabbix添加Tomcat的Java线程数监控配置

Zabbix在线监控tomcat的线程数，因为线上没有配置jmx，所以使用jstack pid的方式获取thread线程。脚本结合zabbix的自动发现，可以实现多个tomcat实例的自动发现配置。免去以后tomcat增加后一个个手动添加的烦恼。

zabbix agent的配置和路径目录结构

主目录：/etc/zabbix

自定义脚本目录：/etc/zabbix/custom，里面有如下几个路径：

conf                         zabbix的配置文件目录

externalscripts        外部命令脚本

public                      zabbix公共文件，例如保存的ip和密码

scripts                     zabbix自定义的脚本

template                 zabbix模板文件

自动发现脚本

这个脚本能够打印出当前服务器上所有的tomcat实例名称，pid进程号和home路径。zabbix会定期执行这个脚本，做到自动发现当前所有的tomcat实例。具体脚本如下：

# coding: utf-8

import sys

import re

import json

from optparse import OptionParser

from qiueer.python.cmds import cmds

def get_tomcat_list():

cmdstr = "ps -ef|grep java|grep -v grep|grep \"Dcatalina.home\"|awk '{print $2 ,$(NF-3)}'|sed 's/-Dcatalina.home=//g'"

c2 = cmds(cmdstr, timeout=3)

stdo = c2.stdo()

stde = c2.stde()

# retcode = c2.code()

(stdo_list, stde_list) = (re.split("\n", stdo), re.split("\n", stde))

data = list()

for tomcat in stdo_list:

if not tomcat:continue

data.append({

"{#TOMCAT_PID}":tomcat.split()[0],

"{#TOMCAT_PATH}": tomcat.split()[1],

"{#TOMCAT_NAME}":tomcat.split()[1].split('/')[-1],

})

return json.dumps({'data': data}, sort_keys=True, indent=7, separators=(",",":"))

def main():

try:

usage = "usage: %prog [options]\ngGet Tomcat Stat"

parser = OptionParser(usage)

parser.add_option("-l", "--list",

action="store_true", dest="is_list", default=False, help="if list all tomcat")

(options, args) = parser.parse_args()

if 1 >= len(sys.argv):

parser.print_help()

return

if options.is_list == True:

print get_tomcat_list()

return

except Exception as e:

import traceback

tb = traceback.format_exc()

print tb

if __name__ == "__main__":

main()

监控脚本

监控脚本是实际执行jstack的地方，用法如下：

./tomcat_thread_status.sh pid username

pid： tomcat进程号

username：  运行tomcat的用户名

脚本：

#!/bin/bash

#### 添加sudo权限 ####

#zabbix ALL=(root) NOPASSWD:/etc/zabbix/custom/scripts/tomcat_thread_status.sh

#Defaults:zabbix !requiretty

####

export PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin

tomcat_path=$1

user=$2

STATS=(NEW:0 RUNNABLE:0 BLOCKED:0 WAITING:0 TIMED_WAITING:0 TERMINATED:0 TOTAL:0)

pid=`ps -ef|grep "java .*$tomcat_path"|grep -v grep|awk '{print $2}'`

if [ $pid ];then

STATUS=`su - $user -c "jstack $pid|grep -i \"java.lang.Thread.State:\""|awk '{print $2}'|sort|uniq -c|awk '{print $2":"$1}'`

fi

if [ ! -z "$STATUS" ];then

total=0

for s in $STATUS;do

key=`echo $s|cut -d: -f1`

val=`echo $s|cut -d: -f2`

i=0

for t in ${STATS[@]};do

if [ `echo $t|grep -c $key` -eq 1 ];then

idx=$i

break

fi

let i=$i+1

done

STATS[$i]=${key}":"${val}

let total=$total+${val}

done

STATS[6]="TOTAL:"${total}

fi

echo ${STATS[@]} | sed -e s/' '/',"'/g -e s/':'/'":'/g -e s/^/'{"thread_status":{"'/g -e s/'$'/'}}'/g

脚本执行后会返回json格式的字符串，包括new、runnable、blocked等线程状态的数据。

zabbix agent配置

UserParameter=custom.tomcat_thread.discovery,python /etc/zabbix/custom/scripts/tomcat_thread_discovery.py --list 2>/dev/null

UserParameter=custom.tomcat_thread_status.item[*],sudo /etc/zabbix/custom/scripts/tomcat_thread_status.sh "$1" "$2"

配置单独放在/etc/zabbix/custom/conf里，记得需要在主配置文件/etc/zabbix/zabbix_agentd.conf里include该路径，否则配置不会生效。

都准备好后重启zabbix agent。

导入模板配置

模板配置可以参考这个，下载后导入即可。

配置主机

最后在主机的template中添加导入的模板，过会就会发现tomcat已自动发现并添加相关线程的监控。

写在最后

具体脚本也可在github上下载：

自动发现：https://github.com/zhangnq/zabbix/blob/master/scripts/tomcat_thread_discovery.py

线程监控：https://github.com/zhangnq/zabbix/blob/master/scripts/tomcat_thread_status.sh

模板：https://github.com/zhangnq/zabbix/blob/master/template/tomcat_thread_status_zbx_v3_template.xml

配置：https://github.com/zhangnq/zabbix/blob/master/conf/tomcat_thread_status.conf

项目地址：https://github.com/zhangnq/zabbix