1、目前监控方案采用prometheus + alertmanager
2、alertmanger发送的webhook中解析告警项,在generatedUrl中是一个prometheus查询语句,参数里有告警的promQL,通过grafana配置一个动态数据源和动态query的面板可以实现动态查询指标趋势图。
3、借助grafana的renderer插件实现截图功能
4、上传截图到飞书图片上传接口
5、消息卡片里引用img_key实现告警通知时附带告警数据趋势。
1、目前监控方案采用prometheus + alertmanager
2、alertmanger发送的webhook中解析告警项,在generatedUrl中是一个prometheus查询语句,参数里有告警的promQL,通过grafana配置一个动态数据源和动态query的面板可以实现动态查询指标趋势图。
3、借助grafana的renderer插件实现截图功能
4、上传截图到飞书图片上传接口
5、消息卡片里引用img_key实现告警通知时附带告警数据趋势。