夜莺 Nightingale——服务器资源监控

最新推荐文章于 2025-04-21 10:07:50 发布
最新推荐文章于 2025-04-21 10:07:50 发布
阅读量1.6k 收藏 12
点赞数 20
分类专栏： 服务器 文章标签： 运维
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_48721706/article/details/146131883
版权

夜莺 Nightingale

一、简介

1. 介绍

夜莺（Nightingale）作为一款开源云原生监控工具，最初由滴滴开发和开源，并于 2022 年 5 月 11 日，捐赠予中国计算机学会开源发展委员会（CCF ODC），为 CCF ODC 成立后接受捐赠的第一个开源项目。

是一款开源的分布式监控系统，专注于服务器资源监控与告警管理。它整合了数据采集、存储、可视化、告警等功能，支持云原生环境，适合中小企业的运维团队。通过夜莺，用户可以构建从基础设施到业务层的全方位监控体系，并实现自动化告警响应，显著提升运维效率。

2. 夜莺的核心架构

夜莺采用模块化设计，主要组件包括：

  • Agent（客户端）

    • 部署在被监控的服务器上，负责采集主机指标（如CPU、内存、磁盘、网络等）。

    • 支持插件机制，可扩展采集自定义指标（如Nginx、MySQL、JVM等）。

    • 默认通过 telegraf 或 Categraf（夜莺自研的高性能Agent）采集数据。

  • 服务端（Server）

    • 数据接收：接收Agent上报的监控数据，支持Prometheus的Remote Write协议。

    • 数据存储：通常对接时序数据库（如Prometheus、InfluxDB、VictoriaMetrics），长期存储指标数据。

    • 告警引擎：基于配置的规则触发告警，支持阈值判断、表达式计算等。

  • 前端（Web UI）

    • 提供可视化仪表盘、告警配置、策略管理、用户权限控制等功能。

    • 支持自定义监控大盘，灵活拖拽图表。

  • 告警通知中心

    • 集成多种通知渠道：邮件、企业微信、钉钉、Slack、Webhook等。

    • 支持告警静默、分级告警、告警合并（去重）等功能。

3. 监控的服务器资源类型

夜莺通过Agent自动采集以下核心指标：

  • CPU

    • 使用率、负载（1/5/15分钟）、上下文切换次数等。

  • 内存

    • 总内存、已用内存、缓存、Swap使用情况。

  • 磁盘

    • 分区容量、IOPS、读写吞吐量、磁盘延迟。

  • 网络

    • 带宽使用率、TCP连接数、丢包率、端口状态。

  • 进程

    • 进程存活状态、资源占用（CPU、内存）、线程数。

  • 其他自定义指标

    • 通过插件或脚本采集应用层指标（如数据库查询性能、HTTP请求延迟等）。

二、安装部署

2.1、部署夜莺平台

参考链接: https://flashcat.cloud/docs/content/flashcat-monitor/nightingale-v7/introduction/

在这里插入图片描述
本次搭建使用二进制部署，官方推荐方式

  1. 安装须知

    • 安装夜莺平台需安装mysql 和 redis，如只安装采集器则不需要
    • 选择一台服务器安装夜莺、时序库、采集器，其他服务器只需安装采集器即可
    • 默认使用17000、8428、20900端口，如有冲突根据实际情况修改

  2. 下载链接: https://flashcat.cloud/download/nightingale/

在这里插入图片描述

  1. 新建nightingale文件夹，将包传入服务器，并解压
tar -zxvf n9e-v8.0.0-beta.6-linux-amd64.tar.gz

在这里插入图片描述

  1. 需将n9e.sql文件导入到mysql数据库中

在这里插入图片描述
5. 更改Nightingale配置，进入etc目录，更改config.toml

vim etc/config.toml

在这里插入图片描述

在这里插入图片描述
我们直接使用线上生成环境方式部署，需要配置mysql、redis

5.1、放开mysql注释，更改mysql连接信息

MySQL 用于存储用户、监控大盘、告警规则等
在这里插入图片描述

5.2、更改redis连接

存放访问令牌(JWT Token)，心跳信息，如机器列表中CPU、内存、时间偏移、核数、操作系统、CPU架构等。

在这里插入图片描述

5.3、更改时序数据库配置端口

[[Pushgw.Writers]]
Url = "http://127.0.0.1:9090/api/v1/write"

[[Pushgw.Writers]]
Url = "http://127.0.0.1:8428/api/v1/write"

更改完毕，保存config.toml配置。

  1. 启动夜莺
nohup ./n9e &> n9e.log &
  1. 开放防火墙
firewall-cmd --permanent --add-rich-rule="rule family="ipv4" source address="需访问夜莺主机ip" port port="17000" protocol="tcp" accept"
# 重载防火墙配置
firewall-cmd --reload

8.登录夜莺

web输入对应主机ip:17000
账号：root
密码：root.2020

本次部署是v8.0版本，暂不用更改key，以下版本记得改密钥、密码，并且端口不要暴露公网
在这里插入图片描述

更改密码，进入页面，用户管理更改
在这里插入图片描述

2.2、部署时序库

  1. 下载链接: https://github.com/VictoriaMetrics/VictoriaMetrics/releases

注意事项：

  • 时序库下载地址为外网，无法登录自行想办法
  • 时序库需下载文件命名规则为：（victoria-metrics-系统-架构-版本号.tar.gz）
  • 如时序库版本号后跟-enterprise请勿下载，该命名规则包为企业版安装需要校验码

找这种版本号没有后缀的
在这里插入图片描述

2. 安装
丢至服务器目录下，解压

tar -zxvf victoria-metrics-linux-amd64-v1.112.0.tar.gz

解压出来就是个二进制文件，可直接运行，默认端口是8428

nohup ./victoria-metrics-prod &> vm.log &

对开放防火墙

firewall-cmd --permanent --add-rich-rule="rule family="ipv4" source address="需访问时序库主机ip" port port="8428" protocol="tcp" accept"

firewall-cmd --reload

登录时序库

web输入对应主机ip:8428

2.3、部署采集器

Categraf 是一个开源的监控采集 Agent，类似 Telegraf、Grafana-Agent、Datadog-Agent，希望对所有常见监控对象提供高质量的监控数据采集能力，采用了 All-in-one 的设计理念，可以同时支持指标、日志、链路追踪数据的采集

对于要监控的目标机器，需要在每个机器上安装 Categraf，Categraf 是夜莺的数据采集器

  1. 下载链接: https://flashcat.cloud/download/categraf/

在这里插入图片描述
2. 解压

tar -zxvf categraf-v0.4.3-linux-amd64.tar.gz
  1. 进入解压后文件夹，更改配置
cd categraf-v0.4.3-linux-amd64

vim conf/config.toml
  1. 更改config.toml连接夜莺平台信息
[global]
hostname = "夜莺上显示的机器名自行修改"

名称可自行更改
[[writers]]  
url = "http://部署夜莺服务器ip:17000/prometheus/v1/write"

[heartbeat]
url = "http://部署夜莺服务器ip:17000/v1/n9e/heartbeat"
  1. 安装采集器
./categraf -install

注意安装夜莺平台的服务器，需要开放端口给采集器的服务器

  1. 启动采集器
nohup ./categraf -start

三、配置夜莺监控

3.1、配置数据源

集成中心->数据源->新增->Promettheus Like

在这里插入图片描述
配置内容：

  • 名称（自行定义）
  • URL（http://127.0.0.1:8428/）
  • Remote Write URL（http://127.0.0.1:8428//api/v1/write）
  • 时序库类型（VictoriaMetrics）
    在这里插入图片描述

3.2、配置基础设施

基础设施->机器列表->全部机器

在这里插入图片描述步骤操作：

  • 选择服务器
  • 批量操作
  • 修改业务组
  • 归属业务组（Default Busi Group）
    在这里插入图片描述

3.3、配置仪表盘

仪表盘->监控仪表盘->Default Busi Group->导入
在这里插入图片描述
监控服务服务器就选linux

在这里插入图片描述
进入到视图后，还可以再自定义图表

在这里插入图片描述

在这里插入图片描述
配置完保存，图表就能添加了一个监控展示指标

四、告警通知

4.1、配置告警规则

告警管理->告警规则->Default Busi Group->导入

夜莺有提供了很多常用的告警模板，可直接使用内置规则即可,

在这里插入图片描述可点击进去查看和修改具体的配置大小
在这里插入图片描述
如这个内存利用率，都可按需和提示配置，使用大于号和小于号做比较
在这里插入图片描述
在这里插入图片描述

4.2、使用企微通知媒介发送告警消息

  1. 创建一个企业微信群机器人
    创建一个微信群，然后在群里添加一个群机器人，可以得到一个 Webhook 地址，如下所示：
    在这里插入图片描述

  2. 创建一个夜莺用户
    在夜莺里创建一个用户，代表这个企微群机器人，如下所示：
    在这里插入图片描述创建用户时，在 wecom_robot_token 中填写这个 Webhook 地址，或者只填写 url 最后面那个 key 也行。

  3. 创建一个团队

可以新建一个团队，把刚才创建的用户加入到这个团队中。当然，在 邮件推送 章节我们已经创建过团队了，我们复用那个团队也可以，把新建的这个用户加入到那个团队中。
在这里插入图片描述
4. 配置告警规则

为了便于测试，我新建一条告警规则，设置 promql：mem_available_percent < 100，并且指定通知媒介是企微（wecom），告警接收人复用之前创建的团队：测试邮件告警的团队。

在这里插入图片描述

  1. 查收企微消息
    在这里插入图片描述
  2. 更改通知模板

告警通知——》 通知模板更改

在这里插入图片描述

4.3、HTTP API接收夜莺告警事件

可使用该回调地址接收告警内容，做自定义的短信通知等等。传参的格式是json，需自行处理转化
在这里插入图片描述

json转化为中文示例

    public static String convertN9eAlertToChineseSms(String jsonAlert){
         ObjectMapper mapper = new ObjectMapper();
        try {
            JsonNode root = mapper.readTree(jsonAlert);
            StringBuilder sms = new StringBuilder();

            // 1. 告警基本信息
            sms.append("【告警通知】\n");
            sms.append("规则名称: ").append(getText(root, "/rule_name")).append("\n");
            sms.append("告警等级: ").append(parseSeverity(root.get("severity").asInt())).append("\n");
            sms.append("触发时间: ").append(DateUtil.formatTimestamp(root.get("trigger_time").asLong())).append("\n");

            // 2. 指标详情
            sms.append("\n▌指标详情\n");
            sms.append("监控对象: ").append(getText(root, "/target_ident")).append("\n");
            sms.append("当前值: ").append(getValueWithUnit(root)).append("\n");
            sms.append("阈值条件: ").append(getText(root, "/prom_ql")).append("\n");

            // 3. 主机信息（从target对象提取）
            JsonNode target = root.path("target");
            sms.append("\n▌主机信息\n");
            sms.append("IP地址: ").append(getText(target, "/host_ip")).append("\n");
            sms.append("内存利用率: ").append(target.path("mem_util").asDouble()).append("%\n");
            sms.append("CPU利用率: ").append(target.path("cpu_util").asDouble()).append("%\n");

            return sms.toString();
        } catch (Exception e) {
            log.error("夜莺短信提醒异常",e.getMessage(), e);
            return null;
        }
    }

五、告警自愈

告警自愈是夜莺的一个高级功能，可以在告警事件产生之后，自动执行一些命令，比如重启服务、清理磁盘、清理无用镜像、抓取现场、自动拉群等。

前提

需要使用 categraf 作为单机采集器，并且在 categraf 的配置中 enable ibex 功能。其次，要在服务端部署 ibex 模块，并且告诉夜莺 ibex 的地址，菜单入口：告警自愈 - 配置，后面我们计划升级把 ibex 的功能揉到夜莺里，这样就不用额外部署这个 ibex 模块了。

更新：如果你看到夜莺的 config.toml 中已经有如下配置，说明 ibex 模块已经揉进夜莺二进制了，无需额外部署 ibex 模块了：

[Ibex]
Enable = true
RPCListen = "0.0.0.0:20090"

脚本

配置自定义脚本。相当于一个任务模板，基于脚本创建任务时会自动填充相关字段。告警规则中可以配置回调地址为 ${ibex}/345，其中 345 这个数字表示脚本的 ID，告警事件产生之后，会把告警事件的信息传给脚本，脚本去做一些自动化的动作。去哪个机器执行？就是去告警的机器执行，告警自愈场景下，会忽略脚本中默认配置的机器列表。下图是一个脚本的详情页面：

在这里插入图片描述

自愈脚本里是不用写机器列表的，告警之后夜莺会自动把告警的那个机器的标识填充到任务的机器列表里。

Nightingale滴滴夜莺监控系统入门（一）--夜莺对比zabbix、Prom
weixin_43876361的博客
12-08 2万+
Nightingale夜莺监控系统入门（一）夜莺系统架构3.x版本为什么使用夜莺如何开箱即用监控对比夜莺对比Zabbix夜莺对比Prometheus 夜莺 系统架构3.x版本 夜莺是Open-Falcon的进阶版，由Open-falcon的主要成员经过滴滴的生产实践优化后的版本，至于Open-falcon是啥，给为看官可以移步Open-falcon官网查看。 下图是夜莺3.x版本的架构图，分别对应采集，传输，存储，索引，告警，监控，资产管理，任务，rdb模块：（会在下篇文章介绍各组件的作用） 3.x版本
Nightingale滴滴夜莺监控系统入门（五）--采集功能
weixin_43876361的博客
02-24 7948
Nightingale滴滴夜莺监控系统入门（五）–采集功能 夜莺支持采集【端口】【进程】【日志】【自定义插件】以及在3.5版本以后支持的主动采集【中间件】的功能； 采集中间件 两种方式： 一种是3.5版本以后新增的Prober模块(实质是Telegraf)，一个模块可以采集多个应用； 一种是利用了Prometheus的生态，将采集各类型应用的exporter部署到目标服务器上，通过额外的插件将exporter上的指标采集下来，再通过该服务器上的agent上报； 1，使用Prober采集； 部署好Pr
Linux本地部署Nightingale夜莺监控并实现远程访问提高运维效率
2501_91525778的博客
04-09 314
## 前言夜莺监控是一款开源云原生观测分析工具，采用 All-in-One 的设计理念，集数据采集、可视化、监控告警、数据分析于一体，与云原生生态紧密集成，提供开箱即用的企业级监控分析和告警能力。夜莺于 2020 年 3 月 20 日，在 github 上发布 v1 版本，已累计迭代 100 多个版本。本地部署后,为解决无法远程访问的难题,今天我们介绍如何实现让本地 nightingale 结合 cpolar 内网穿透工具实现 远程也可以访问,提高运维效率.
监控服务器状态，夜莺（ nightingale）方案介绍
qq_34168515的博客
07-29 1418
选择一台服务器，部署一个监控服务端，然后在各个windows或者linux中部署数据采集节点。类似如下结构目前我这边采用的技术是Nightingale 的解决方案。
Nightingale 夜莺监控系统 - 监控篇（2）
RAB
01-13 2970
Nightingale 夜莺监控系统 - 监控篇（2）
Nightingale监控-n9e部署-v6.3.1
m0_61318185的博客
02-27 5391
夜莺监控（ Nightingale ）是一款国产、开源云原生监控分析系统，采用 All-In-One 的设计，集数据采集、可视化、监控告警、数据分析于一体。于 2020 年 3 月 20 日，在 github 上发布 v1 版本，已累计迭代 60 多个版本。
Nightingale 夜莺监控系统 - 部署篇（1）
RAB
01-11 7131
Nightingale 夜莺监控系统 - 部署篇（1）
Nightingale | 夜莺监控
zs11234的博客
04-19 1842
​ Nightingale | 夜莺监控，一款先进的开源云原生监控分析系统，采用 All-In-One 的设计，集数据采集、可视化、监控告警、数据分析于一体，与云原生生态紧密集成，提供开箱即用的企业级监控分析和告警能力。
@滴滴夜莺监控系统（Nightingale）
ଲ一笑奈@何
09-17 872
滴滴夜莺Nightingale
夜莺(Flashcat)V6监控(一):介绍及其部署
热门推荐
m0_61323675的博客
04-12 1万+
夜莺监控（ Nightingale ）是一款国产、开源云原生监控分析系统，采用 All-In-One 的设计，集数据采集、可视化、监控告警、数据分析于一体。于 2020 年 3 月 20 日，在 github 上发布 v1 版本，已累计迭代 60 多个版本。从 v5 版本开始与 Prometheus、VictoriaMetrics、Grafana、Telegraf、Datadog 等生态紧密协同集成，提供开箱即用的企业级监控分析和告警能力，已有众多企业选择将 Prometheus + AlertManage
夜莺：:light_bulb:分布式高性能监控系统。 下一代开放猎鹰
02-02
国内用户可以访问gitee大规模仓库： ://gitee.com/cnperl/Nightingale，非实时同步，每天一次，不过速度很快。 夜莺简介 夜莺是一套分布式高可用的运维监控系统，最大的特点是混合云支持，既可以支持传统物理机虚拟机的场景，也可以支持K8S容器的场景。同时，夜莺也不只是监控，还有一部分CMDB的能力，自动化运维的能力，很多公司都基于夜莺开发自己公司的运维平台。开源的这部分功能模块也是商业版本的一部分，所以可以继续保障，会持续维护，诸君可放心使用。效果图如下： OCE认证 OCE是一个认证机制和交流平台，为夜莺生产用户量身打造，我们会为OCE企业提供更好的技术支持，诸如专有的技术沙龙，企业一对一的交流机会，专属的答疑群等，如果贵司已将夜莺上了生产， 文档资料 文档手册： : 欢迎大家一起完善 视频教程： //space.bilibili.com/442531657欢迎大家关注 音频答疑： : //www.ximalaya.com/keji/45095827/欢迎大家关注 二次开发： ://xie.infoq.cn/article/30d37e98fbe5
本地nightingale观测分析工具安装与远程连接夜莺监控详细教程
m0_73879806的博客
07-15 1330
本文主要介绍如何在本地Linux系统部署 Nightingale 夜莺监控并结合cpolar内网穿透工具实现远程也可以访问，提高运维效率。解决本地部署后无法远程访问的难题。夜莺监控是一款开源云原生观测分析工具，采用 All-in-One 的设计理念，集数据采集、可视化、监控告警、数据分析于一体，与云原生生态紧密集成，提供开箱即用的企业级监控分析和告警能力。夜莺于 2020 年 3 月 20 日，在 github 上发布 v1 版本，已累计迭代 100 多个版本。
Nightingale夜莺监控本地化部署结合内网穿透实现远程查看分析数据
沐雨风栉
09-09 892
本文主要介绍如何在本地Linux系统部署 Nightingale 夜莺监控并结合cpolar内网穿透工具实现远程也可以访问，提高运维效率。解决本地部署后无法远程访问的难题。夜莺监控是一款开源云原生观测分析工具，采用 All-in-One 的设计理念，集数据采集、可视化、监控告警、数据分析于一体，与云原生生态紧密集成，提供开箱即用的企业级监控分析和告警能力。夜莺于 2020 年 3 月 20 日，在 github 上发布 v1 版本，已累计迭代 100 多个版本。
提升运维效率：在Linux上部署Nightingale夜莺监控并实现远程访问
等风来
11-11 2120
本文将介绍如何在本地Linux系统上部署Nightingale夜莺监控，并结合cpolar内网穿透工具实现远程访问，从而提升运维效率，解决本地部署后无法进行远程访问的问题。夜莺监控是一款开源的云原生观测分析工具，采用All-in-One设计理念，集数据采集、可视化、监控告警和数据分析于一体，紧密集成于云原生生态中，提供即插即用的企业级监控分析和告警功能。自2020年3月20日在GitHub上发布v1版本以来，夜莺监控已累计迭代超过100个版本。
使用Docker部署Nightingale开源观测分析工具并实现远程访问
fq157856469的博客
08-12 1014
本文主要介绍如何在本地Linux系统部署 Nightingale 夜莺监控并结合cpolar内网穿透工具实现远程也可以访问，提高运维效率。解决本地部署后无法远程访问的难题。夜莺监控是一款开源云原生观测分析工具，采用 All-in-One 的设计理念，集数据采集、可视化、监控告警、数据分析于一体，与云原生生态紧密集成，提供开箱即用的企业级监控分析和告警能力。夜莺于 2020 年 3 月 20 日，在 github 上发布 v1 版本，已累计迭代 100 多个版本。
本地安装nightingale监控分析服务并发布公网详细流程
asdssadddd的博客
06-17 1151
本文主要介绍如何在本地Linux系统部署 Nightingale 夜莺监控并结合cpolar内网穿透工具实现远程也可以访问，提高运维效率。解决本地部署后无法远程访问的难题。夜莺监控是一款开源云原生观测分析工具，采用 All-in-One 的设计理念，集数据采集、可视化、监控告警、数据分析于一体，与云原生生态紧密集成，提供开箱即用的企业级监控分析和告警能力。夜莺于 2020 年 3 月 20 日，在 github 上发布 v1 版本，已累计迭代 100 多个版本。
Nightingale Helm 图表安装指南
gitblog_01095的博客
09-12 443
Nightingale Helm 图表安装指南 n9e-helm Helm chart of Nightingale 项目地址: https://gitcode.com/gh_mirrors/n9/n9e-helm ...
Nightingale-滴滴夜莺开源监控部署
最新发布
技术引领业务创新
04-21 1404
夜莺监控介绍及安装部署
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值