prometheus 监控之 进程监控（process-exporter）

源代码名称:process-exporter

源代码网址:http://www.github.com/ncabatoff/process-exporter

exporter下载：https://github.com/ncabatoff/process-exporter/releases/download/v0.4.0/process-exporter-0.4.0.linux-amd64.tar.gz

[xxx@trade1 ~]$ process-exporter --help
Usage of process-exporter:
  -children
        if a proc is tracked, track with it any children that aren't part of their own group (default true)
  -config.path string
        path to YAML config file
  -debug
        log debugging information to stdout
  -man
        print manual
  -namemapping string
        comma-seperated list, alternating process name and capturing regex to apply to cmdline
  -once-to-stdout-delay duration
        Don't bind, just wait this much time, print the metrics once to stdout, and exit
  -procfs string
        path to read proc data from (default "/proc")
  -procnames string
        comma-seperated list of process names to monitor
  -recheck
        recheck process names on each scrape
  -web.listen-address string
        Address on which to expose metrics and web interface. (default ":9256")
  -web.telemetry-path string
        Path under which to expose metrics. (default "/metrics")

配置

选择要监视的进程并将它的分组，提供命令行参数或者使用YAML配置文件。

为了避免与命令行YAML元素混淆，我们将 /proc//cmdline的空分隔内容引用为 array argv[] 。

process_names 中的每个项目都提供了识别和命名过程的诀窍。 可选 name 标记定义用于命名匹配进程的模板；如果没有指定，name 默认为 {{.ExeBase}} 。

可用的模板变量：

{{.Comm}} 包含原始可执行文件的basename，/proc//stat 中的换句话说，2nd 字段
{{.ExeBase}} 包含可执行文件的basename
{{.ExeFull}} 包含可执行文件的完全限定路径
{{.Matches}} 映射包含应用命令行tlb所产生的所有匹配项
process_names 中的每个项必须包含一个或者多个选择器( 。comm，exe 或者 cmdline ) ；如果存在多个选择器，则它们都必须匹配。 每个选择器都是符合进程。argv[0] 或者 cmdline的comm的一个字符串列表，用于应用于 命令行的正则表达式。

对于 comm 和 exe，字符串列表是 an，表示任何匹配任何字符串的进程都将被添加到项的组中。

对于 cmdline，regex的列表是一个，也就是说它们都必须匹配。 regexp中的任何捕获组都必须使用 ?P 选项为捕获指定名称，该名称用于填充 .Matches 。

进程只能属于一个组： 即使多个项目匹配，文件中列出的第一个也会胜出。

其他性能提示：在cmdline子句中添加exe或者comm子句，这样在执行名不匹配时避免执行 regexp 。

以下配置是监控所有的进程

[xxx@trade1 bin]$ cat config.yml 
process_names:
  - name: "{{.Comm}}"
    cmdline:
    - '.+'

启动process-exporter：

process-exporter -config.path config.yml 

[root@trade1 bin]# curl  10.100.20.143:9256/metrics |grep JSL            
namedprocess_namegroup_context_switches_total{ctxswitchtype="nonvoluntary",groupname="JSL"} 0
namedprocess_namegroup_context_switches_total{ctxswitchtype="voluntary",groupname="JSL"} 627
namedprocess_namegroup_cpu_system_seconds_total{groupname="JSL"} 0.020000000000000018
namedprocess_namegroup_cpu_user_seconds_total{groupname="JSL"} 0.040000000000000036
namedprocess_namegroup_major_page_faults_total{groupname="JSL"} 0
namedprocess_namegroup_memory_bytes{groupname="JSL",memtype="resident"} 3.444736e+06
namedprocess_namegroup_memory_bytes{groupname="JSL",memtype="swapped"} 0
namedprocess_namegroup_memory_bytes{groupname="JSL",memtype="virtual"} 3.487744e+07
namedprocess_namegroup_minor_page_faults_total{groupname="JSL"} 0
namedprocess_namegroup_num_procs{groupname="JSL"} 1
namedprocess_namegroup_num_threads{groupname="JSL"} 1
namedprocess_namegroup_oldest_start_time_seconds{groupname="JSL"} 1.54755489e+09
namedprocess_namegroup_open_filedesc{groupname="JSL"} 7
namedprocess_namegroup_read_bytes_total{groupname="JSL"} 0
namedprocess_namegroup_states{groupname="JSL",state="Other"} 0
namedprocess_namegroup_states{groupname="JSL",state="Running"} 0
namedprocess_namegroup_states{groupname="JSL",state="Sleeping"} 1
namedprocess_namegroup_states{groupname="JSL",state="Waiting"} 0
namedprocess_namegroup_states{groupname="JSL",state="Zombie"} 0
namedprocess_namegroup_threads_wchan{groupname="JSL",wchan="do_msgrcv"} 1
namedprocess_namegroup_worst_fd_ratio{groupname="JSL"} 6.8359375e-06
namedprocess_namegroup_write_bytes_total{groupname="JSL"} 0

可以看到我的进程已经在监控状态了。

Grafana 画图

https://grafana.com/dashboards/249