Prometheus & Alertmanager & Phonix

Prometheus和Alertmanager

一文带你了解Prometheus
Prometheus整合Springboot实现报警

Prometheus和Alertmanager是两个不同的工具，但它们通常一起使用来监控和处理警报。以下是它们的简要介绍：

• Prometheus：一种开源的监控系统，用于收集和存储时间序列数据。它可以通过HTTP协议获取监控数据，并提供PromQL查询语言进行数据分析和查询。Prometheus还提供了内置的警报规则功能，可以根据特定的规则触发警报。
• Alertmanager：一种开源的警报路由器和通知工具，用于处理从Prometheus发送的警报。它可以根据警报标签和路由规则将警报发送到不同的接收者，例如电子邮件、Slack、PagerDuty等。Alertmanager还支持警报抑制和静默功能，以避免重复警报和噪音。
• Phoniex：提供页面配置告警配置和告警接受方式，并生成相关prometheus和altermanager的配置信息

因此，Prometheus和Alertmanager通常一起使用，以收集、存储、分析和处理监控数据和警报。Prometheus收集监控数据并触发警报规则，然后将警报发送到Alertmanager进行路由和通知。Alertmanager处理警报并将它们发送到适当的接收者。

实践
介绍
Prometheus, a Cloud Native Computing Foundation project, is a systems and service monitoring system

scrape_configs

在Prometheus中，scrape_configs是配置文件中定义的一组规则，用于指定如何抓取（scrape）目标（targets）的指标数据。job_name是scrape_configs中的一个字段，它为一组抓取目标定义了一个逻辑上的名称。

以下是scrape_configs和job_name如何工作的详细解释：

1. 定义抓取作业：在Prometheus的配置文件（通常是prometheus.yml）中，scrape_configs部分定义了多个抓取作业。每个作业通过job_name来标识。

2. 指定目标：每个job_name下可以指定一个或多个目标（targets），这些目标是Prometheus需要抓取指标的服务器地址。

3. 抓取间隔：可以为每个job_name指定抓取间隔（scrape_interval），这是Prometheus抓取目标指标的时间间隔。

4. 抓取路径：还可以指定每个作业的HTTP路径（metrics_path），这是Prometheus向目标发送请求以获取指标数据的URL路径。

5. 服务发现：scrape_configs可以与服务发现机制（如Kubernetes、Consul、DNS等）集成，以动态发现目标。

6. 标签：job_name作为标签附加到所有从该作业抓取的指标上。这意味着所有来自同一个job_name的指标都会被标记上相同的job标签，便于后续的查询和监控。

7. 查询与聚合：在Prometheus的查询语言（PromQL）中，可以使用job标签来过滤和聚合来自特定作业的指标数据。

8. 告警：告警规则可以基于特定job_name的指标来设置，以监控特定服务或组件的状态。

例如，以下是一个简单的prometheus.yml配置文件中的scrape_configs部分：

scrape_configs:
  - job_name: 'my_service'
    scrape_interval: 15s
    static_configs:
      - targets: ['localhost:8080', 'localhost:8081']
  - job_name: 'another_service'
    scrape_interval: 30s
    consul_sd_configs:
      - server: 'consul.local:8500'
        services: ['my-app']

在这个例子中，有两个抓取作业：

• my_service作业每15秒抓取localhost上的8080和8081端口。
• another_service作业每30秒通过Consul服务发现抓取my-app服务的实例。

通过这种方式，job_name帮助Prometheus用户组织和区分不同服务或组件的监控数据。

配置案例

这个配置片段是Prometheus中scrape_configs的一个示例，它定义了一个名为prometheus的抓取作业。下面是每个字段的解释：

• job_name: prometheus: 这个字段为抓取作业指定了一个名称，在这个例子中是prometheus。所有通过这个作业抓取的指标都会带有这个job标签。

• honor_timestamps: true: 这个字段告诉Prometheus要尊重目标发送的指标的时间戳。默认情况下，Prometheus会使用它抓取指标时的时间戳，但是如果你设置honor_timestamps为true，它将使用目标发送的时间戳。

• scrape_interval: 1m: 这个字段定义了Prometheus抓取目标的间隔时间，这里是每1分钟抓取一次。

• scrape_timeout: 10s: 当前的抓取操作如果在10秒内没有完成，就会被认为是超时。

• metrics_path: /metrics: 这个字段指定了Prometheus向目标发送HTTP请求时使用的路径。在这个例子中，Prometheus会请求目标的/metrics路径来获取指标数据。

• scheme: http: 这个字段指定了用于抓取指标的HTTP协议，这里是http。

• follow_redirects: true: 如果目标返回一个HTTP重定向，Prometheus将会跟随这个重定向。

• enable_http2: true: 这个字段指示Prometheus使用HTTP/2协议来抓取指标，如果服务器支持的话。

• static_configs: 这个字段定义了一组静态配置，它告诉Prometheus哪些目标需要被抓取。

  • targets: 这是一个目标列表，Prometheus将会尝试从这些目标抓取指标。在这个例子中，只有一个目标localhost:9090，意味着Prometheus将会尝试从本地的9090端口抓取指标。

这个配置片段定义了一个简单的抓取作业，用于从本地的9090端口抓取指标，并将这些指标与job=prometheus标签关联起来。这个作业每1分钟执行一次抓取，如果在10秒内没有响应则超时，并且会跟随HTTP重定向以及使用HTTP/2协议。

Alertmanager 路径

Alertmanager是一个用于处理和路由警报的工具。它的配置文件通常存储在以下路径中：

/etc/alertmanager/

在这个目录下，可以找到以下文件：

• alertmanager.yml：Alertmanager的主要配置文件，其中包含有关警报路由、通知方式、接收者等的信息。
• templates/：此目录包含警报通知的模板文件。可以使用模板文件自定义警报通知的外观和格式。
• web/：此目录包含Alertmanager的Web界面文件。可以使用Web界面查看警报和配置信息。

注意，Alertmanager的目录和文件路径可能因安装方式和操作系统而异。