Prometheus 告警分配到指定接收组
route属性用来设置报警的分发策略,它是一个树状结构,按照深度优先从左向右的顺序进行匹配。
主要处理流程:
1. 接收到Alert,根据labels判断属于哪些Route(可存在多个Route,一个Route有多个Group,一个Group有多个Alert)。
2. 将Alert分配到Group中,没有则新建Group。
3. 新的Group等待group_wait指定的时间(等待时可能收到同一Group的Alert),根据resolve_timeout判断Alert是否解决,然后发送通知。
4. 已有的Group等待group_interval指定的时间,判断Alert是否解决,当上次发送通知到现在的间隔大于repeat_interval或者Group有更新时会发送通知。
route: receiver: 'default-receiver' # 为一个组发送通知的初始等待时间,默认30s、等待是时间内为了合并更多同类邮件 group_wait: 30s # 在发送新告警前的等待时间。通常5m或以上、第二组发送邮件间隔时间 group_interval: 5m # 发送重复告警的周期。如果已经发送了通知,再次发送之前需要等待多长时间。通常3小时或以上 repeat_interval: 4h # 报警分组依据,根据标签进行分组 group_by: [cluster, alertname] # 所有不匹配以下子路由的告警都将保留在根节点,并发送到“default-receiver” routes: # 所有service=mysql或者service=cassandra的告警分配到数据库接收端 - receiver: 'database-pager' group_wait: 10s match_re: # 使用正则匹配告警包含两个服务,发送到database-page service: mysql|cassandra # 所有带有team=frontend标签的告警都与此子路由匹配 # 它们是按产品和环境分组的,而不是集群 - receiver: 'frontend-pager' group_by: [product, environment] match: # 所有告警标签带有frontend发送到frontend-pager team: frontend # receiver标记:告警接受者 receivers: # name:报警来源自定义名称 - name: 'database-pager' # email_configs:通过邮箱发送报警 email_configs: # to:指定接收端email - to: 'xiangsikai@126.com' - name: 'frontend-pager' # email_configs:通过邮箱发送报警 email_configs: # to:指定接收端email - to: 'xiangsikai@126.com'