Prometheus(普罗米修斯)监控系统 - 2、网络等硬件设备监控(snmp-exporter)


前言

SNMP监控原理是通过SNMP协议查询网络设备上的MIB(管理信息库),设备运行SNMP代理,Prometheus通过SNMP Exporter轮询这些设备,SNMP Exporter会翻译SNMP协议的数据为Prometheus的时间序列格式,供Prometheus采集和存储。

下列就以群晖 NAS、QNAS、华为防火墙设备为例子,开启 SNMP 服务并部署 Exporter 进行监控,其中包括 MIB 文档解读、Exporter 镜像制作 + 部署、数据抓取测试等。


一、群晖 NAS

1、开启 SNMP 服务

浏览器登录 群晖管理后台,点击 “控制面板” → “终端机和 SNMP” → “SNMP” → 勾选“启用 SNMP 服务” + 勾选 “SNMPv1、SNMPv2c 服务” )+ 填写 “社群” 信息(可理解为密码)→ 点击“应用”生效

2、测试

在另一台设备(Linux)可访问该群晖 NAS (UDP:161端口),使用 snmpwalk 命令测试,若没有这通过命令安装:
Centos/Redhat:

sudo yum update
sudo yum install net-snmp-utils

Ubuntu/Debian:

sudo apt update
sudo apt install snmp

测试命令:

snmpwalk -v 2c -c 社群密码 群晖IP

若返回一大串 iso. 开头的信息,则表示正常,否则请检查网络、社群密码、群晖IP

3、MIB 文档

群晖管理后台SNMP 配置页面,点击最下方访问 Synology 网站 访问Synology MIB 文档
或 Google 搜索 群晖 SNMP MIB 文档

文档访问链接如下:
群晖 SNMP MIB Guide 文档

查阅文档,找到自己所监控信息的每一项值所对应的 OID 和 返回值。

比如说,我要监控这台 NAS 的硬盘,在文档的p8-9页 OID: .1.3.6.1.4.1.6574.2 中有说明:
.13为硬盘健康状态,.1为硬盘索引号,.9为硬盘坏道数

PS:
感觉文档有点坑,光看文档会误以为 OID .1.3.6.1.4.1.6574.2 直接加上 .13(后缀)就能获取状态值,其实不是的,使用 snmpwalk 命令查询 .1.3.6.1.4.1.6574.2.13

snmpwalk -v 2c -c 社群密码 群晖IP 1.3.6.1.4.1.6574.2.13

返回报错:

iso.3.6.1.4.1.6574.2.13 = No Such Object available on this agent at this OID

通过查阅 .1.3.6.1.4.1.6574.2 的返回值,才知道其实它是 .1.3.6.1.4.1.6574.2.1.1.13,命令:

snmpwalk -v 2c -c 社群密码 群晖IP 1.3.6.1.4.1.6574.2

4、编写 snmp.yml

知道自己抓取的 OID 后,就可编写 snmp.yml 了(snmp-exporter 用于过滤 snmp 信息),内容如下:

syno_mib:
  version: 2
  walk:
    - 1.3.6.1.4.1.6574.2.1.1
  metrics:
    - name: disk_health
      oid: 1.3.6.1.4.1.6574.2.1.1.13
      type: gauge
      help: "Disk health status"
      indexes:
        - labelname: ifIndex
          type: gauge
      lookups:
        - labels:
            - ifIndex
          labelname: disk_name
          oid: 1.3.6.1.4.1.6574.2.1.1.1
          type: DisplayString
    - name: disk_smart
      oid: 1.3.6.1.4.1.6574.2.1.1.9
      type: gauge
      help: "Disk smart status"
      indexes:
        - labelname: ifIndex
          type: gauge
      lookups:
        - labels:
            - ifIndex
          labelname: disk_name
          oid: 1.3.6.1.4.1.6574.2.1.1.1
          type: DisplayString
  auth:
    community: 社群

命令解释:

  1. syno_mib: 定义了一个 SNMP 采集的配置项,名字为 syno_mib。

  2. version: 2 指定了 SNMP 的版本为 2,表示这个配置使用 SNMP v2 协议。

  3. walk: walk 是用来遍历指定的 OID 子树并抓取所有相关的 SNMP 数据。(这个get用不上)

  • 1.3.6.1.4.1.6574.2.1.1 这是需要遍历的 OID,代表这个 OID 及其子节点的数据将会被抓取。1.3.6.1.4.1.6574.2.1.1 通常与磁盘信息相关。
  1. metrics: 定义了要采集的 SNMP 指标。

    • name: disk_health 定义了一个名为 disk_health 的指标,用来表示磁盘的健康状态。
  2. oid: 1.3.6.1.4.1.6574.2.1.1.13 指定了获取 disk_health 指标的 OID,1.3.6.1.4.1.6574.2.1.1.13 是这个健康状态的具体 OID。

  3. type: gauge 指定了指标类型为 gauge,表示这个值是一个可以上下浮动的数值类型。

  4. help: “Disk health status” 这是一段帮助信息,说明了这个指标的用途,表示它用于显示磁盘的健康状态。

  5. indexes: 指定了该指标需要哪些索引值来标识。(这里开始往下的目的都是按 1.3.6.1.4.1.6574.2.1.1.1硬盘索引号划分返回的状态值)

  • labelname: ifIndex 定义了一个标签名 ifIndex,通常是 SNMP 的接口索引,用于区分不同的磁盘。 type: gauge 说明这个索引值是一个 gauge 类型的值。
  1. lookups: 定义了一个映射关系,用于将索引值转换为可读的名称。
  • labels: 定义了映射时需要使用的标签。
  • ifIndex 指定使用 ifIndex 标签。
  1. labelname: disk_name 定义了一个新的标签 disk_name,用于标识磁盘的名称。

  2. oid: 1.3.6.1.4.1.6574.2.1.1.1 指定了用于获取磁盘名称的 OID,1.3.6.1.4.1.6574.2.1.1.1 用于查找磁盘的显示名称。

  3. type: DisplayString 指定了该 OID 返回的值是一个 DisplayString 类型,即可显示的文本字符串。

5、运行snmp-exporter

dockerhub 上 Prometheus 官方做了个 snmp-exporter 镜像,就叫 prom/snmp-exporter,直接 docker pull 拉下来运行即可。

# 拉取
docker pull prom/snmp-exporter:v0.26.0
# 在台能访问群晖 NAS 的设备上运行
docker run -d \
  -v /path/to/snmp.yml:/etc/snmp_exporter/snmp.yml \
  -p 9116:9116 \
  prom/snmp-exporter:v0.26.0

PS:最好使用固定版本,否则每次拉取都是最新版本的

IP + 端口号 在浏览器访问,Target 栏 输入群晖 NAS 的 IPModule 栏 输入自定义的采集项名,如,上面用的是 syno_mib,若能返回数据,则成功,否则检查IP地址、网络、采集项名等。

PS:snmp-exporter抓取数据通俗点来说,就是在snmp-exporter自身配好过滤规则,通过输入对方ip再去获取对方snmp的数据。

6、加入Prometheus监控

修改普罗米修斯的 /etc/prometheus/prometheus.rules 文件,追加如下内容并重启服务。

  - job_name: 'snmp-syno-nas'
    scrape_interval: 5m
    scrape_timeout: 3m
    static_configs:
      - targets:
        - 群晖NAS IP1
        - 群晖NAS IP2
        - 群晖NAS IP3
        - 群晖NAS IP......
    metrics_path: /snmp
    params:
      module: [syno_mib]
    relabel_configs:
      - source_labels: [__address__]
        target_label: __param_target
      - source_labels: [__param_target]
        target_label: instance
      - target_label: __address__
        replacement: 'IP:9116'

PS:
最后 replacement 部分,若是k8s容器部署 snmp-exporter ,和普罗米修斯在同一命名空间,可改成 “容器名: ‘IP:9116’”

在浏览器访问 Prometheus ,点击 “Status” → “Targets” 中若能发现 “snmp-syno-nas” 栏,且设备数量对得上,State 为 UP,则代表已接入普罗米修斯监控了。


二、QNAP NAS

1、开启 SNMP 服务

浏览器登录 QNAP 管理后台,点击“控制台” → “SNMP” → 勾选 “启用 SNMP 服务器” + 选择“SNMP 版本”(这里勾选的是“SNMP V1/V2”)+ 填写“社区”(可理解为密码)→ 点击“应用”生效

2、SNMP MIB 文件下载

同样在 SNMP 页面,点击 SNMP MIB 的 “下载” 并进行查阅。
这里和群晖不同,它只提供了 NAS.mib 的文件下载(QNAP 官方文档也没找到)。

打开 NAS.mib 文件,片段如下:

systemCPU-UsageEX OBJECT-TYPE
    SYNTAX Integer32
    MAX-ACCESS read-only
    STATUS     current
    DESCRIPTION
        "system CPU usage"
    ::= { systemInfoEx 1 }

命令解释:

  1. systemCPU-UsageEX OBJECT-TYPE:
    定义了一个 SNMP 对象,名称为 systemCPU-UsageEX,表示系统 CPU 使用率的对象类型。

  2. SYNTAX Integer32:
    这个属性定义了对象的类型,这里定义的 SYNTAX 是 Integer32,表示这个对象的值是 32 位整数。

  3. MAX-ACCESS read-only:
    MAX-ACCESS 表示该对象的访问权限。read-only 说明这个对象只能被读取,不能修改。

  4. STATUS current:
    STATUS 属性说明对象的状态。current 表示这是一个当前的有效对象。

  5. DESCRIPTION “system CPU usage”:
    DESCRIPTION 是对该对象的简要描述,解释了这个对象表示的是系统 CPU 使用率。

  6. ::= { systemInfoEx 1 }:
    这是对象的 OID(对象标识符)。systemInfoEx 是一个父级节点,1 表示这是该父级节点下的第一个子对象。它标识了这个对象在整个 MIB 结构中的位置。

PS:
总的来说,主要看两个地方就够了
systemCPU-UsageEX 就是对应 snmp.yml 文件里 metrics 的 name (后续生成 snmp.yml 要用的)
DESCRIPTION 就是说明这个东西是干嘛用的

3、generate的使用

主要用generate来对*.mib生成snmp.yml文件

generator使用说明(github)
generator下载地址(github)

若访问不了 github ,这已经打包好了,下载解压用就行:
snmp-exporter-main 集合包

下好后,按官方使用说明,把 NAS.mib 文件放到snmp_exporter/generator/mibs/ 下并编辑 snmp_exporter/generator/generator.yml 文件

modules:
    qnap:
        walk:
            - raidCount
            - raidStatus

PS:
qnap 是自定义的采集项名
walk 下的是要采集的信息(查看 NAS.mib 内容提取)

执行编译操作:

make docker-generate

PS:会联网下载github、构建docker镜像,生成 snmp.yml 文件

文件生成在:snmp_exporter/generator/snmp.yml
内容如下:

# WARNING: This file was auto-generated using snmp_exporter generator, manual changes will be lost.
modules:
  qnap:
    walk:
    - 1.3.6.1.4.1.55062.1.10.5.1.4
    get:
    - 1.3.6.1.4.1.55062.1.10.4.0
    metrics:
    - name: raidCount
      oid: 1.3.6.1.4.1.55062.1.10.4
      type: gauge
      help: The number of RAID. - 1.3.6.1.4.1.55062.1.10.4
    - name: raidStatus
      oid: 1.3.6.1.4.1.55062.1.10.5.1.4
      type: OctetString
      help: The status of RAID - 1.3.6.1.4.1.55062.1.10.5.1.4
      indexes:
      - labelname: raidIndex
        type: gauge

4、运行snmp-exporter

在生成的 snmp.yml 文件追加version、community等信息即可使用。

PS:snmp.yml 的具体格式和说明请参考 群晖 NAS编写 snmp.yaml 章节*

使用 docker 部署 snmp-exporter:

# 拉取
docker pull prom/snmp-exporter:v0.26.0
# 在台能访问QNAP NAS 的设备上运行
docker run -d \
  -v /path/to/snmp.yml:/etc/snmp_exporter/snmp.yml \
  -p 9116:9116 \
  prom/snmp-exporter:v0.26.0

IP + 端口号 在浏览器访问,Target 栏 输入群晖 NAS 的 IPModule 栏 输入自定义的采集项名,如,上面用的是 qnap,若能返回数据,则成功,否则检查IP地址、网络、采集项名等。

PS:若有疑问请查阅群晖 NAS运行snmp-exporter章节

5、加入Prometheus监控

修改普罗米修斯的 /etc/prometheus/prometheus.rules 文件,追加如下内容并重启服务。

  - job_name: 'snmp-qnap-nas'
    scrape_interval: 5m
    scrape_timeout: 3m
    static_configs:
      - targets:
        - QNAP NAS IP1
        - QNAP NAS IP2
        - QNAP NAS IP....
    metrics_path: /snmp
    params:
      module: [qnap]
    relabel_configs:
      - source_labels: [__address__]
        target_label: __param_target
      - source_labels: [__param_target]
        target_label: instance
      - target_label: __address__
        replacement: 'IP:9116'

在浏览器访问 Prometheus ,点击 “Status” → “Targets” 中若能发现 “snmp-syno-nas” 栏,且设备数量对得上,State 为 UP,则代表已接入普罗米修斯监控了。


三、华为防火墙

1、开启 SNMP 服务

浏览器登录 华为防火墙 管理后台,点击 “系统” → “配置” → “SNMP” → 勾选“SNMP” + 勾选 “v2c” + 填写 “SNMP 只读团体名” 、“认证密码”、“加密密码” → 点击“应用”生效

这里不知道是我防火墙太旧还是什么bug,Web 页面配置就是不生效(你也可以先尝试上面方法开启),只能到进 控制台 去开启 snmp 服务:笔记本接防火墙Console 端口(RJ45 转 USB 或 DB9 转 USB 的线,9600 波特率)SSH 远程连接Web 登录打开 CLI 控制台 ,任意采用一种方式即可。

进控制台后命令如下:

system-view
undo snmp-agent
snmp-agent
#重启snmp服务
display snmp-agent community
#查看之前的社群配置(加密了,所以显示乱码)
undo snmp-agent community <community-string>
#删除社群
snmp-agent community read <社群密码>

2、测试

网络测试

开通ACL(没有则不做)、开通 SNMP 服务后。
在另一台设备(Linux)访问测试该端口号:

nc -zv -u <firewall-ip> 161
# 返回如下信息就是正常,否则请检查网络连接
# Connection to <firewall-ip> 161 port [udp/snmp] succeeded!
# UDP 端口不能使用telnet测试

连接测试

该华为防火墙(UDP:161端口),使用 snmpwalk 命令测试,若没有这通过命令安装:
Centos/Redhat:

sudo yum update
sudo yum install net-snmp-utils

Ubuntu/Debian:

sudo apt update
sudo apt install snmp

测试命令:

snmpwalk -v 2c -c 社群密码 华为防火墙IP

若返回一大串 iso. 开头的信息,则表示正常,否则请检查社群密码、华为防火墙 IP

3、查阅文档

华为官方网站 上查找自己设备对应型号,点击左上角 “切换产品” → 输入自己设备的型号 → 点击 “MIB 查询” → 选择所对应 “版本” (在 防火墙管理后台可以看到) → 查阅文档

查看 “对象含义” 根据自己说需监控的信息提取 OID 。

PS:坑呀,华为官网给我的文档一个 OID 都对不上!!!设备 + 版本我都选对的,不知道是不是防火墙太久了,用的人不多,文档就没人维护了

4、部署 snmp-exporter + Prometheus监控。

具体操作请查阅上方 群晖NAS编写 snmp.yml 运行snmp-exporter 加入Prometheus监控 篇章。

其他

报警规则、看板制作、消息推送,由后面的更新的Prometheus+Grafana的部署篇章中会详细说明。

目前,已更新的所有普罗米修斯及其相关篇章:

Prometheus(普罗米修斯)监控系统 - 1、基本原理

Prometheus(普罗米修斯)监控系统 - 2、网络等硬件设备监控(snmp-exporter)

Prometheus(普罗米修斯)监控系统 - 3、操作系统信息监控(node-exporter)

Prometheus(普罗米修斯)监控系统 - 4、服务器硬件信息监控(ipmi-exporter)

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值